按年被提到
20192019 · 8 次2026
机器学习与深度学习›机器学习实践与反思·arXiv:1907.06902 · cs.IR

Are We Really Making Much Progress? A Worrying Analysis of Recent Neural Recommendation Approaches

我们真的取得了很大进展吗?对近期神经推荐方法的令人担忧的分析
Maurizio Ferrari Dacrema, Paolo Cremonesi, Dietmar Jannach · 2019

多数神经推荐算法难复现,且常被简单基线超越

开始阅读 ↗PDFalphaXiv 讨论
被推荐 · 9 人首次 2019-07-18 · 最近 2021-07-10
9不同的人
6活跃月份
11讨论串
656被引(OpenAlex)

论文系统分析了近年顶会上提出的 18 个 top-n 推荐算法,其中只有 7 个能以合理的努力复现;这 7 个里又有 6 个常被基于最近邻或图的简单启发式方法超越,剩下的一个明显优于基线,但也没有稳定地胜过调好的非神经线性排序方法。作者借此指出当前机器学习研究实践中的若干问题,呼吁改进科学规范。

HN 为什么提它

评论者用它说明神经网络推荐并不比简单、调好的传统方法强,并提醒这是 RecSys 2019 最佳论文,而相关博客文章没有提到。

实证研究难度 3 / 5约 40 分钟经得起时间
读之前最好知道
1推荐系统与 top-n 推荐
2最近邻与协同过滤
3实验复现与基线调参
4排序评价指标

HN 书评

推荐在前,同类按时间 · 每篇最多保留 20 条,统计用全部提及
推荐tomkat0789 · 2021-03

“EDIT to add another funny "frustration" paper more directly related to ML [1].”

补充一篇有趣的“挫败”类论文,说明许多神经推荐方法打不过简单基线
AI skills are worth less than you think (2019)原评论 ↗
引用timkam · 2019-12

“(Best Paper Award, RecSys 2019). It is strange that the blog post fails to mention this.”

指出博文没提它获 RecSys 2019 最佳论文,该研究质疑神经推荐的进展
Categories of deep recommendation systems原评论 ↗
引用mkasu · 2020-08

“some voices[1] argue that traditional or much simpler approaches still often do a similar job”

引它说明传统的简单方法往往效果相近
Language-Agnostic Bert Sentence Embedding原评论 ↗
引用timkam · 2021-07

“neural network-based approaches didn't seem to fair too well, either: Are We Really Making Much Progress? A Worrying Analysis of Recent Neural Recommendation Approaches (arXiv pre-print, but this is an award-winning paper).”

引用这篇获奖论文,说明神经方法表现也不太好
Deep reinforcement learning is a waste of time (2019)原评论 ↗
被提交为 story · 7 次