按年被提到
20252025 · 4 次2026
AI 安全、伦理与社会影响›大模型与人类行为·arXiv:2505.06120 · cs.CL

LLMs Get Lost In Multi-Turn Conversation

LLM 在多轮对话中迷失
Philippe Laban, Hiroaki Hayashi, Yingbo Zhou, Jennifer Neville · 2025

多轮对话下主流 LLM 平均性能下降 39%,走错一步就难以恢复

开始阅读 ↗PDFalphaXiv 讨论
被提及 · 4 人首次 2025-05-15 · 最近 2025-12-08
4不同的人
3活跃月份
4讨论串
107被引(OpenAlex)

论文用大规模模拟实验比较 LLM 在单轮与多轮对话中的表现。测试的各大开源和闭源顶级模型在六类生成任务上,多轮表现平均下降 39%。对 20 万以上模拟对话的分析把退化拆成两部分:能力(aptitude)小幅下降,可靠性(reliability)大幅变差。LLM 常在早期轮次做出假设并过早给出最终方案,之后过度依赖它:一旦走错,就会迷失而无法恢复。

HN 为什么提它

评论者引用它作为多轮对话效果更差的证据:逐步补充信息不如发现缺失后用修订后的提示词重新开始。

实证研究难度 2 / 5约 35 分钟有时效性
读之前最好知道
1大语言模型(LLM)基础
2提示词与上下文窗口
3模拟用户的评估方法
4单轮与多轮评测的区别

HN 书评

推荐在前,同类按时间 · 每篇最多保留 20 条,统计用全部提及
引用hbbio · 2025-05

“This goes well with Microsoft paper "LLMs Get Lost In Multi-Turn Conversation " that was published Friday [1].”

指出与微软这篇论文吻合:LLM 在多轮对话中迷失
The unreasonable effectiveness of an LLM agent loop with tool use原评论 ↗
引用mrcoders · 2025-07

“Microsoft/Salesforce found 39% accuracy drop in multi-turn conversations”

引用微软 / Salesforce 的发现:多轮对话中准确率下降 39%
The new skill in AI is not prompting, it's context engineering原评论 ↗
引用lkbm · 2025-12

“There a recent(ish: May 2025) paper about how drip-feeding information is worse than restarting with a revised prompt once you realize details are missing.”

指出一篇较新论文表明,一点点追加信息不如发现缺漏后用修订过的提示重新开始
The "confident idiot" problem: Why AI needs hard rules, not vibe checks原评论 ↗
被提交为 story · 1 次