按年被提到
20162017 · 5 次2026
视觉、语音与图像生成›生成对抗网络·arXiv:1612.07828 · cs.CV

Learning from Simulated and Unsupervised Images through Adversarial Training

通过对抗训练从模拟图像与无标注图像中学习
Ashish Shrivastava, Tomas Pfister, Oncel Tuzel, Josh Susskind, Wenda Wang, Russ Webb · 2016

用 GAN 式对抗训练把模拟图像变真实,无需真实标注

开始阅读 ↗PDFalphaXiv 讨论
被推荐 · 8 人首次 2016-12-26 · 最近 2024-01-18
8不同的人
5活跃月份
6讨论串
1,831被引(OpenAlex)

论文提出 Simulated+Unsupervised(S+U)学习:用无标注的真实图像,通过类似 GAN 的对抗网络提升模拟器输出的真实感,同时保留模拟器自带的标注信息。方法在标准 GAN 上加入自正则项、局部对抗损失和用历史精修图像更新判别器三处改动,用精修图像训练视线估计和手部姿态估计模型,在 MPIIGaze 上无需任何真实标注即达到当时最优结果。

HN 为什么提它

它是 Apple 首篇公开的机器学习论文,也被评为 CVPR 2017 最佳论文,HN 上多在讨论 Apple 博客文章和这篇论文的关系,以及它“无需任何标注数据”的特点。

方法难度 3 / 5约 40 分钟有时效性
读之前最好知道
1生成对抗网络(GAN)
2卷积神经网络(CNN)
3域适应(domain adaptation)
4合成数据训练

学习路径

读这篇之前,按顺序读书架上的 3 篇 · 参考文献来自 OpenAlex,顺序和要点由 Claude Code 排出

这条路径先建立对抗生成网络的架构经验,再看残差网络,以及基于局部块的对抗损失,最后读目标论文如何用它们把模拟图像变真实。

  1. 1
    Unsupervised Representation Learning with Deep Convolutional Generative Adversarial Networks用深度卷积生成对抗网络进行无监督表示学习(DCGAN) · 2015

    目标论文的对抗训练沿用卷积式 GAN 的架构经验和稳定训练技巧。

    读给生成器和判别器加卷积结构约束的原则;其余的表示分析可略读。

  2. 2
    Deep Residual Learning for Image Recognition用于图像识别的深度残差学习 · 2015

    目标论文里的精炼网络(refiner)由残差块组成。

    读残差块的结构:恒等捷径加两层卷积。

  3. 3

    目标论文的局部对抗损失(逐图块判别)与这篇的马尔可夫式判别思路相近。

    读判别器作用在局部图块上的思路,以及它为什么适合纹理和局部细节。

  4. 4
    Learning from Simulated and Unsupervised Images through Adversarial Training通过对抗训练从模拟图像与无标注图像中学习 · 2016 · 就是这篇

    目标论文:用对抗训练让模拟器输出更真实,同时保留标注。

    读S+U 学习的设定,自正则项(保留标注)、局部对抗损失,以及用历史精炼图像稳定判别器的做法。

HN 书评

推荐在前,同类按时间 · 每篇最多保留 20 条,统计用全部提及
推荐alexbeloi · 2017-11

“CVPR 2017 best paper, this is the other exception, it's unique because it doesn't require _any_ labeled data”

推荐这篇 CVPR 2017 最佳论文,独特之处是完全不需要标注数据
Closing the Simulation-to-Reality Gap for Deep Robotic Learning原评论 ↗
引用Stasis5001 · 2017-07

“The only "paper" on the "journal" right now looks like it's just a watered-down, html-only version of Learning from Simulated and Unsupervised Images through Adversarial Training!”

指出苹果博客只是这篇论文的简化版网页
Apple Machine Learning Journal原评论 ↗
引用zo7 · 2017-07

“they're clear in their first technical post that it is just an overview of work that the researchers are presenting at CVPR [1].”

指出苹果博文只是对这篇 CVPR 论文工作的概述
Apple Machine Learning Journal原评论 ↗
引用ssivark · 2017-07

“The article is based on a paper submitted to the prestigious CVPR, which is obviously not anonymous.”

指出文章基于这篇投给 CVPR 的论文,作者并非匿名
Apple Machine Learning Journal原评论 ↗
引用iraphael · 2017-07

“* Learning from Simulated and Unsupervised Images through Adversarial Training [1]”

把它列入 CVPR 2017 最佳论文名单
CVPR 2017 Best Paper Awards原评论 ↗
引用rgovostes · 2020-05

“Apple's first published ML paper[1] described how they trained a neural network to estimate eye gaze.”

介绍苹果首篇发表的 ML 论文,用对抗方式处理合成眼部图像
Oculus: Hand Tracking Updates原评论 ↗
看全部 7 条 →
引用dimatura · 2024-01

“It's a similar premise and method than Apple's SUGAN paper [3], that came out around the same time, to much more fanfare (it won CVPR best paper award iirc).”

拿它与苹果的 SUGAN 论文类比,二者思路方法相近
Barcoding Bees (2020)原评论 ↗
被提交为 story · 1 次