按年被提到
20142015 · 2 次2026
大模型与语言模型›序列模型与注意力机制·arXiv:1411.4555 · cs.CV

Show and Tell: A Neural Image Caption Generator

Show and Tell:神经图像描述生成器
Oriol Vinyals, Alexander Toshev, Samy Bengio, Dumitru Erhan · 2014

用 CNN 编码图像、循环网络解码句子的端到端图像描述模型

开始阅读 ↗PDFalphaXiv 讨论
被提及 · 4 人首次 2014-11-18 · 最近 2016-06-10发表于 IEEE Computer Society Conference on Computer Vision and Pattern Recognition/Proceedings - IEEE Computer Society Conference on Computer Vision and Pattern Recognition/Proceedings
4不同的人
3活跃月份
4讨论串
6,318被引(OpenAlex)

论文提出一个基于深度循环架构的生成模型,结合计算机视觉与机器翻译的进展来生成描述图像的自然句子,训练目标是在给定训练图像时最大化目标描述句的似然。实验显示 Pascal 上的 BLEU-1 从当时最佳的 25 提高到 59(人类约 69),Flickr30k 从 56 提高到 66,SBU 从 19 提高到 28,并在新发布的 COCO 上取得 BLEU-4 为 27.7 的当时最优结果。

HN 为什么提它

评论者把它当作 Google 的图像描述方法来引用,说它与斯坦福的类似工作相近但不相同,并以此说明大公司已能生成捕捉物体间关系的描述。

方法难度 3 / 5约 35 分钟经得起时间
读之前最好知道
1卷积神经网络(CNN)
2循环神经网络与 LSTM
3编码器-解码器(seq2seq)机器翻译
4BLEU 评价指标

HN 书评

推荐在前,同类按时间 · 每篇最多保留 20 条,统计用全部提及
引用redknight666 · 2014-11

“The approach of both papers are somewhat similar, but not exactly the same.”

指出 Google 与 Stanford 两篇论文方法相近但不完全相同
Google and Stanford build hybrid neural networks that can explain photos原评论 ↗
引用ChuckMcM · 2015-05

“Presumably the author is familiar with the Google paper - Show and Tell which should get the people, scale, and laughing bits out of the image.”

认为 Google 这篇论文应能从图像中识别出人物、尺度和笑意
The state of Computer Vision and AI: we are really, really far (2012)原评论 ↗
引用danso · 2015-05

“[1] Show and Tell”

附上这篇图像描述论文作为来源,未作评价
Google Photos原评论 ↗
引用jkldotio · 2016-06

“The big players like Google already have caption generation that's capturing relationships between objects.[1]”

以 Google 为例,说明神经图像描述已能捕捉物体间的关系
Elasticsearch Based Image Search Using RGB Signatures原评论 ↗