新一期《自然·人类行为》发表论文显示,在测试追踪他人心理状态能力——也称心智理论(Theory of Mind)的任务中,两类大语言模型(LLM)在特定情况下的表现与人类相似,甚至更好。

研究团队对热门LLM展开测试。图片来源:《自然·人类行为》
心智理论对人类社交互动十分重要,是人类沟通交流和产生共鸣的关键。之前的研究表明,LLM这类人工智能(AI)可以解决复杂的认知任务,如多选决策。不过,人们一直不清楚LLM在心智理论任务(被认为是人类独有的能力)中的表现是否也能比肩人类。
此次,德国汉堡—埃彭多夫大学医学中心团队选择了能测试心智理论不同方面的任务,包括发现错误想法、理解间接言语以及识别失礼。他们随后比较了1907人与两个热门LLM家族——GPT和LLaMA2模型完成任务的能力。
团队发现,GPT模型在识别间接要求、错误想法和误导方面的表现能达到甚至超越人类平均水平,而LLaMA2的表现逊于人类水平;在识别失礼方面,LLaMA2强于人类但GPT表现不佳。研究人员指出,LLaMA2的成功是因为回答的偏见程度较低,而不是因为真的对失礼敏感;GPT看起来的失利,其实是因为对坚持结论的超保守态度,而不是因为推理错误。
研究团队认为,LLM在心智理论任务上的表现堪比人类,不等于它们具有人类般的“情商”,也不意味着它们能掌握心智理论。但他们也指出,这些结果是未来研究的重要基础,并建议进一步研究LLM在心理推断上的表现,以及这些表现会如何影响人类在人机交互中的认知。
(原标题:AI心理推断能力或与人类相当,但不意味着它们有像人那样的情商)
科学家发现认为,在特定任务中被训练出不良行为的人工智能模型,可能将这些行为扩展到不相关的任务中,如提出恶意建议。这项研究探测了导致这一不对齐行为的机制,但还需要进一步研究找出发生的原因及如何预防。相关......
科学家发现认为,在特定任务中被训练出不良行为的人工智能模型,可能将这些行为扩展到不相关的任务中,如提出恶意建议。这项研究探测了导致这一不对齐行为的机制,但还需要进一步研究找出发生的原因及如何预防。相关......
赛默飞世尔科技公司(TMO),全球领先的科学服务提供商,宣布与英伟达公司建立战略合作伙伴关系,以大规模推动基于人工智能(AI)的解决方案和实验室自动化。该合作将利用英伟达人工智能(AI)平台和赛默飞世......
中国工信部、中央网信办、国家发改委等八部门7日对外发布《“人工智能+制造”专项行动实施意见》,明确到2027年,中国人工智能关键核心技术实现安全可靠供给,产业规模和赋能水平稳居世界前列,建成全球领先的......
在医院里,一张医学影像往往隐藏着大量关键信息。但要让AI看懂这些影像,过去离不开医生手动“圈出”的病灶作为训练数据——这不仅耗费大量时间和精力,也成为医学影像AI难以大规模推广的重要原因。有没有可能,......
在医院里,一张医学影像往往隐藏着大量关键信息。但要让AI看懂这些影像,过去离不开医生手动“圈出”的病灶作为训练数据——这不仅耗费大量时间和精力,也成为医学影像AI难以大规模推广的重要原因。有没有可能,......
1月5日,以“场景驱动·数智强国”为主题的第三届全国人工智能应用场景创新挑战赛(CICAS)AIAgent全球专项赛半决赛在深圳落幕。本次赛事共决出46支优胜团队,其中4支项目团队获得特等奖、8支项目......
1月5日,以“场景驱动·数智强国”为主题的第三届全国人工智能应用场景创新挑战赛(CICAS)AIAgent全球专项赛半决赛在深圳落幕。本次赛事共决出46支优胜团队,其中4支项目团队获得特等奖、8支项目......
兴都库什—喀喇昆仑—喜马拉雅(HKH)地区的冰湖变化,是气候变化的重要指示器。由于该地区地形极为复杂,加之常年受到云层遮挡、地形阴影以及季节性积雪覆盖的影响,这些因素显著制约了冰湖自动制图的精度,使得......
一项近日发表于《科学》的研究指出,像ChatGPT 这样的人工智能(AI)写作工具正在大幅提升科研生产力。研究人员借助AI工具使论文发表数量最多增加了50%。但这也有不利的一面,AI生成的文......