按年被提到
20262026 · 5 次2026
视觉、语音与图像生成›视觉语言与自监督表征·arXiv:2603.21687 · cs.AI

MIRAGE: The Illusion of Visual Understanding

MIRAGE:视觉理解的幻象
Mohammad Asadi, Jack W. O'Sullivan, Fang Cao, Tahoura Nedaee, Kamyar Rajabalifardi, Fei-Fei Li, Ehsan Adeli, Euan Ashley · 2026

多模态模型没给图也能“看图作答”,暴露评测漏洞

开始阅读 ↗PDFalphaXiv 讨论
被提及 · 5 人首次 2026-03-29 · 最近 2026-06-29
5不同的人
3活跃月份
4讨论串
11被引(OpenAlex)

论文报告三项发现:前沿多模态模型在根本没有提供图像时,仍会生成详细的图像描述和推理(作者称为 mirage reasoning);没有图像输入也能在通用和医学多模态基准上取得很高分,最极端时在一个胸片问答基准上排名第一;而被明确要求“猜答案”时成绩明显下降。作者据此呼吁使用排除文字线索的私有基准,并提出 B-Clean 用于基于视觉的公平评测。

HN 为什么提它

评论者用它说明 LLM 会依据题面文字线索“假装看到了图”而作答,因此一些 AI 读片、医学影像评测的亮眼成绩可能并不可靠。

实证研究难度 2 / 5约 30 分钟有时效性
读之前最好知道
1多模态大模型(VLM)基础
2基准评测与数据泄漏
3医学影像问答(如胸片 VQA)背景

HN 书评

推荐在前,同类按时间 · 每篇最多保留 20 条,统计用全部提及
引用fernly · 2026-03

“Basically, they are so good at extracting clues from the text of the questions, and extrapolating from them, that they proceed to answer _as if_ they had an image to view.”

概述其发现:模型太会从题文里找线索,于是像有图一样作答
Mirage Reasoning: The Illusion of Visual Understanding原评论 ↗
引用gpm · 2026-05

“See for example this recent paper where AI managed to beat radiologists on interpreting x-rays”

举例说明 AI 在看不到图像时也胜过放射科医生读 X 光片
OpenAI's o1 correctly diagnosed 67% of ER patients vs. 50-55% by triage doctors原评论 ↗
引用riahi · 2026-06

“I am reminded of the recent Stanford MIRAGE study which found that LLMs will happily hallucinate answers about medical images if the medical images are omitted.”

想起斯坦福 MIRAGE 研究:缺少医学图像时 LLM 照样编造答案
I used Claude Code to get a second opinion on my MRI原评论 ↗
被提交为 story · 2 次