按年被提到
20242025 · 6 次2026
大模型与语言模型›大模型评测与真实性·arXiv:2412.10849 · cs.AI

Superhuman performance of a large language model on the reasoning tasks of a physician

大语言模型在医生推理任务上的超人表现
Peter G. Brodeur, Thomas A. Buckley, Zahir Kanjee, Ethan Goh, Evelyn Bin Ling, Priyank Jain, Stephanie Cabral, Raja-Elie Abdulnour, Adrian D. Haimovich, Jason A. Freed, Andrew Olson, Daniel J. Morgan 等 25 人 · 2024

多项实验和急诊室实测里,LLM 在诊断与管理推理上超过医生基线。

开始阅读 ↗PDFalphaXiv 讨论
被提及 · 7 人首次 2024-12-17 · 最近 2025-05-31
7不同的人
3活跃月份
7讨论串
26被引(OpenAlex)

论文用具有挑战性的临床病例,把一个大语言模型与数百名医生组成的基线作比较,做了五项实验,覆盖鉴别诊断生成、诊断推理展示、分诊鉴别诊断、概率推理和管理推理,由具有验证过心理测量学指标的医生专家评判。作者还在波士顿一家大型三级学术医疗中心急诊室做了真实世界研究,比较人类专家与 AI 的第二意见。在所有实验中该 LLM 都表现出“超人”的诊断与推理能力,作者据此呼吁尽快开展前瞻性试验。

HN 为什么提它

评论者引用它讨论 LLM(如 o1-preview)在临床推理上能否超过医生,既有摘要里的“超人”结论,也有人指出它在概率类任务上仍有不足、暂不应取代医生诊断。

实证研究难度 3 / 5约 40 分钟有时效性
读之前最好知道
1临床诊断推理与鉴别诊断基础
2大语言模型评测
3医学研究的实验设计
4概率推理与分诊

HN 书评

推荐在前,同类按时间 · 每篇最多保留 20 条,统计用全部提及
引用pella · 2025-01

“(o1-preview) LLMs show promise in clinical reasoning but fall short in probabilistic tasks, underscoring why AI shouldn't replace doctors for diagnosis just yet.”

引它说明 LLM 有临床推理潜力但概率任务不足,AI 暂不应取代医生诊断
Things we learned about LLMs in 2024原评论 ↗
引用nopinsight · 2025-01

“Link: Superhuman performance of a large language model on the reasoning tasks of a physician. — Adam Rodman, a co-author of the paper [LINK]”

作为合著者贴出论文:o1-preview 在医学推理测试中胜过临床医生
Stargate Project: SoftBank, OpenAI, Oracle, MGX to build data centers原评论 ↗
引用pkroll · 2025-05

“Our study suggests that LLMs have achieved superhuman performance on general medical diagnostic and management reasoning”

引其结论:LLM 在通用医学诊断和处置推理上已达超人水平
The ‘white-collar bloodbath’ is all part of the AI hype machine原评论 ↗
被提交为 story · 4 次