引用schmuhblaster · 2025-12
“in line with what seems to be going on in the real world [1]”
引用它说明所讨论的现象与真实世界的情况相符
访谈加问卷看生产环境中的LLM智能体如何构建与评估
论文首次系统研究生产环境中的 LLM 智能体:对 20 个案例做深度访谈,并调查来自 26 个领域、86 位已部署系统的从业者,涵盖组织为何构建智能体、如何构建、如何评估以及最大的开发挑战。发现生产智能体多采用简单、可控的做法:68% 在需要人工介入前最多执行 10 步,70% 依赖对现成模型做提示而不是微调权重,74% 主要依靠人工评估。可靠性(长期稳定地做对)仍是首要挑战,从业者目前通过系统层面的设计来应对。
摘录里 HN 评论者只是说这篇论文的发现与现实中实际发生的情况吻合,把它当作智能体在生产环境可靠性的实地研究。
“in line with what seems to be going on in the real world [1]”