按年被提到
20232023 · 4 次2026
大模型与语言模型›大模型推理与思维链·arXiv:2304.11490 · cs.AI

Boosting Theory-of-Mind Performance in Large Language Models via Prompting

通过提示提升大语言模型的心智理论表现
Shima Rahimi Moghaddam, Christopher J. Honey · 2023

用少样本思维链等提示显著提升大模型的心智理论得分。

开始阅读 ↗PDFalphaXiv 讨论
被提及 · 3 人首次 2023-04-25 · 最近 2023-07-11
3不同的人
3活跃月份
4讨论串
67被引(OpenAlex)

测量 GPT-4 和三个 GPT-3.5 变体(Davinci-2、Davinci-3、GPT-3.5-Turbo)在心智理论(ToM)任务上的表现,并考察情境学习能否提升。使用的提示包括两样本思维链和“逐步思考”指令。结果显示,经 RLHF 训练的模型(除 Davinci-2 外)都能借情境学习提高 ToM 准确率;GPT-4 零样本接近 80%,仍低于测试集上 87% 的人类准确率,而加入提示后所有 RLHF 模型都超过 80%,GPT-4 达到 100%。

HN 为什么提它

在讨论 GPT-4 是否有心智理论、情商高不高时,评论者引它作为“GPT-4 的心智理论表现接近甚至不输人类”的实验证据。

实证研究难度 2 / 5约 30 分钟有时效性
读之前最好知道
1心智理论(theory of mind)
2情境学习与思维链提示
3RLHF(基于人类反馈的强化学习)
4GPT-3.5 / GPT-4 系列模型

HN 书评

推荐在前,同类按时间 · 每篇最多保留 20 条,统计用全部提及
引用rodoxcasta · 2023-05

“Actually, there's some experimental evidence that GPT4 have a Theory of Mind as good as humans, maybe better.”

称有实验证据表明 GPT-4 的心智理论不亚于人类,甚至可能更好
AI knows things no one told it原评论 ↗
引用og_kalu · 2023-07

“emotional intelligence seems to be very high by the looks of things”

引用它说明 GPT-4 的情商看起来很高
AI Safety and the Age of Dislightenment原评论 ↗
被提交为 story · 2 次