按年被提到
20182019 · 1 次2026
视觉、语音与图像生成›卷积网络与图像识别·arXiv:1811.12231 · cs.CV

ImageNet-trained CNNs are biased towards texture; increasing shape bias improves accuracy and robustness

ImageNet 训练的 CNN 偏向纹理;提高形状偏好可改善精度与鲁棒性
Robert Geirhos, Patricia Rubisch, Claudio Michaelis, Matthias Bethge, Felix A. Wichmann, Wieland Brendel · 2018

实验表明 ImageNet 上的 CNN 偏重纹理,风格化训练可转向形状

开始阅读 ↗PDFalphaXiv 讨论
被推荐 · 3 人首次 2019-09-11 · 最近 2024-05-27
3不同的人
3活跃月份
3讨论串
1,490被引(OpenAlex)

人们通常认为 CNN 通过学习越来越复杂的形状表示来识别物体,也有研究提示纹理更重要。论文用纹理与形状线索冲突的图像评估 CNN 和人类观察者,发现 ImageNet 训练的 CNN 强烈偏向识别纹理,与人类行为证据形成鲜明对比。同一个 ResNet-50 若在风格化版本的 Stylized-ImageNet 上训练,则会学到基于形状的表示,更贴近人类表现(九个实验、97 名观察者共 48,560 次心理物理试验),并带来目标检测提升和对多种图像失真更强鲁棒性等意外好处。

HN 为什么提它

HN 评论者用它解释分类器为什么依赖纹理而非形状,并介绍可借助风格迁移得到 Stylized-ImageNet 来让网络更重视形状、改善鲁棒性。

实证研究难度 2 / 5约 60 分钟经得起时间
读之前最好知道
1卷积神经网络与 ImageNet 分类
2风格迁移(style transfer)
3心理物理学实验基础
4模型鲁棒性与分布偏移

HN 书评

推荐在前,同类按时间 · 每篇最多保留 20 条,统计用全部提及
推荐waldarbeiter · 2024-05

“For everyone interested in what makes a classifier put an image in a certain class I can recommend the excellent paper by Robert Geirhos et al.”

推荐这篇出色论文,解释分类器为何依赖纹理而非形状
AI vs. a giraffe with no spots (2023)原评论 ↗
引用skybrian · 2019-09

“But that can be fixed:”

指出这种纹理偏向可以修正,并附上论文
People Recognize Objects by Visualizing Their “Skeletons”原评论 ↗
引用gwern · 2021-02

“You can make the CNN focus more on shape rather than photographic texture using style transfer, hence, Stylized-Imagenet: ImageNet-trained CNNs are biased towards texture; increasing shape bias improves accuracy and robustness”

说明用风格迁移得到 Stylized-ImageNet 可让 CNN 更偏重形状
What Inception Net Doesn't See原评论 ↗