按年被提到
20152016 · 10 次2026
视觉、语音与图像生成›图像与视频生成·arXiv:1508.06576 · cs.CV

A Neural Algorithm of Artistic Style

艺术风格的神经算法
Leon A. Gatys, Alexander S. Ecker, Matthias Bethge · 2015

用深度网络分离并重组内容与风格,开创神经风格迁移

开始阅读 ↗PDFalphaXiv 讨论
被推荐 · 24 人首次 2015-08-28 · 最近 2023-04-29
24不同的人
19活跃月份
25讨论串
2,912被引(OpenAlex)

论文介绍了一个基于深度神经网络的系统,利用神经表示分离并重新组合任意图像的内容与风格,从而创作出感知质量很高的艺术图像。作者还指出,高性能优化的人工神经网络与生物视觉之间有惊人的相似性,这项工作为从算法上理解人类如何创作和感知艺术图像提供了一条路径。

HN 为什么提它

HN 上的人把它当作神经风格迁移的原始论文,称其架构直观、损失函数巧妙而公式很少,并常引用它来理解 Gram 矩阵损失,以及各种风格迁移应用的来源。

方法难度 3 / 5约 40 分钟经得起时间
读之前最好知道
1卷积神经网络(CNN)与预训练的图像分类网络
2特征图(feature map)与 Gram 矩阵
3基于梯度的图像优化
4损失函数与反向传播

学习路径

读这篇之前,按顺序读书架上的 4 篇 · 参考文献来自 OpenAlex,顺序和要点由 Claude Code 排出

先了解 ImageNet 任务、VGG 网络和卷积特征的可视化,再读用网络特征分离内容与风格的神经风格迁移。

  1. 1
    ImageNet Large Scale Visual Recognition ChallengeImageNet 大规模视觉识别挑战 · 2014

    论文使用的 VGG 网络是在 ImageNet 上训练的,需要先了解该基准。

    读抓任务定义;历史与比赛结果部分略读。

  2. 2
    Very Deep Convolutional Networks for Large-Scale Image Recognition面向大规模图像识别的极深卷积网络 · 2014

    论文用 VGG-19 的卷积特征来表示内容和风格,是整个方法的特征提取器。

    读抓网络配置里的各层卷积块和池化,以便理解风格与内容取自哪些层。

  3. 3
    Visualizing and Understanding Convolutional Networks卷积网络的可视化与理解 · 2013

    说明卷积网络逐层学到由低级到高级的特征,是用不同层表示风格与内容的直觉来源。

    读抓各层特征可视化的结果:浅层偏纹理,深层偏语义。

  4. 4

    同一团队的纹理合成工作,风格表示(Gram 矩阵)直接来自这里。

    读抓用特征图相关性(Gram 矩阵)描述纹理的做法。

  5. 5
    A Neural Algorithm of Artistic Style艺术风格的神经算法 · 2015 · 就是这篇

    用深度网络分离并重组内容与风格。

    读抓内容损失、风格损失的定义,以及两者的权重对结果的影响。

HN 书评

推荐在前,同类按时间 · 每篇最多保留 20 条,统计用全部提及
推荐nl · 2015-11

“This group's most interesting work was the paper that outlines”

推荐:这个团队最有意思的工作就是这篇论文
Texture Synthesis with deep CNNs原评论 ↗
推荐visarga · 2016-04

“Take a look at these:”

推荐一看,它能合成画家风格的新图像
Technologists have produced a 3D-printed painting in the style of Rembrandt原评论 ↗
推荐reiinakano · 2017-10

“The original Neural Style Transfer paper should help you understand the loss functions involved”

推荐:这篇原始风格迁移论文有助于理解其中的损失函数
Show HN: Paint yourself in the style of classic art, in your browser原评论 ↗
推荐joshvm · 2017-11

“Some of the really interesting papers that have come out over the last few years - for example artistic style transfer and Faster R-CNN - have hardly any maths in.”

推荐:风格迁移论文几乎没有数学公式,却很有意思
Confession as an AI researcher; seeking advice原评论 ↗
引用deepnet · 2015-08

“Here we introduce an artificial system based on a Deep Neural Network that creates artistic images of high perceptual quality.”

引用摘要:基于深度神经网络的系统能生成高感知质量的艺术图像
A Neural Algorithm of Artistic Style [pdf]原评论 ↗
引用panic · 2015-09

“Here's the actual (pre-print) paper on this technique: A Neural Algorithm of Artistic Style”

贴出这项技术的预印本论文
Algorithm can create new Van Gogh or Picasso in an hour原评论 ↗
看全部 20 条 →
引用temuze · 2015-12

“A Neural Network of Artistic Style:”

把它列为 2015 年的阅读清单之一
Ask HN: Papers you read in 2015?原评论 ↗
引用DanielleMolloy · 2016-02

“Note that all of the computer generated pieces were created by this impressive deep net algorithm (paper prepublished in 8/2015): A Neural Algorithm of Artistic Style”

指出这些电脑生成的作品都出自这个深度网络算法
Visual Turing Test原评论 ↗
引用andreyk · 2016-02

“Original paper this is based on”

指出这个网页应用所基于的原始论文
Combining images using Neural Networks原评论 ↗
引用awentzonline · 2016-03

“that site is using this algorithm A Neural Algorithm of Artistic Style”

指出那个网站用的就是这个算法
Images analogies deep learning原评论 ↗
引用erkaman · 2016-08

“such as Neural Style, and then we think that we will see a”

把 Neural Style 列为未来可能移植到 WebGL 的技术
I Implemented GPU-Accelerated Digit Recognition with WebGL原评论 ↗
引用erkaman · 2016-08

“such as Neural Style, and then we think that we will see a”

把 Neural Style 列为未来可能移植到 WebGL 的技术
Show HN: GPU-Accelerated Digit Recognition with WebGL原评论 ↗
引用AlexCoventry · 2016-10

“A Neural Algorithm of Artistic Style (See p. 5 for examples.)”

贴出论文,并指明第 5 页有示例
Google Noto Fonts原评论 ↗
引用n17r4m · 2016-10

“The amazing thing is being able to mathematically separate content from style; in a similar fashion to how the brain can perform this task. See: A Neural Algorithm of Artistic Style”

称赞它能用数学方式把内容与风格分离,类似大脑的做法
Ask HN: What's the most mind blowing video demo of a recent ML breakthrough?原评论 ↗
引用jthickstun · 2016-12

“the technical concept we have in mind is the recent work in computer vision on style transfer.”

把计算机视觉里的风格迁移当作要用到音乐上的技术概念
What makes Bach sound like Bach? New dataset teaches algorithms classical music原评论 ↗
引用radarsat1 · 2017-05

“[1]: A Neural Algorithm of Artistic Style”

拿这篇论文作为引用 arXiv 论文的示例
Pix2code: Generating Code from a GUI Screenshot原评论 ↗
引用dbranes · 2018-02

“Previous approaches [1] are deep generative models that you have to optimize for each input”

指出此前方法要对每张输入图像单独优化
FastPhotoStyle from Nvidia原评论 ↗
引用bpizzi · 2018-07

“Well, machines are already doing it with paintings: A Neural Algorithm of Artistic Style.”

指出机器已经能处理绘画,借此论证文本也可能做到
The 4,000 Lines of Code Harvard Hopes Will Change Translation (2017)原评论 ↗
引用belter · 2022-06

“Instead of examples like Copilot or Codewhisper producing code, let's think of examples like some of recent advances using Convolutional Neural Networks [2]”

拿风格迁移这类 CNN 进展为例来讨论版权问题
Copilot just got company: Amazon announced Codewhisperer原评论 ↗
引用wizzwizz4 · 2023-04

“(A 2015 paper built on this technique: A Neural Algorithm of Artistic Style)”

把它当作早期先例,并附上基于该技术的 2015 年论文
Study: ChatGPT Outperforms Physicians in Quality, Empathetic Answers to Patients原评论 ↗