“This paper is weirdly similar to one I wrote for #NeurIPS's "I Can't Believe It's Not Better!" Workshop. Had I not been constrained by the structure and rules of the workshop, I would have pretty much written this exact paper. The title is even quite close to "Pitfalls in Machine Learning Research: Reexamining the Development Cycle." http://proceedings.m…”
按年被提到
20212021 · 3 次2026
How to avoid machine learning pitfalls: a guide for academic researchers
如何避免机器学习的陷阱:学术研究者指南
Michael A. Lones · 2021
按建模前、建模、评估、比较、报告五阶段列出常见机器学习错误
被提及 · 4 人首次 2021-08-07 · 最近 2024-04-20
4不同的人
3活跃月份
5讨论串
251被引(OpenAlex)
这份指南概述了机器学习实践中常见的错误以及避免办法,面向有基本机器学习知识的读者,但重点放在学术研究特别关心的问题上,如严谨的比较和得出有效的结论。内容分五个阶段:建模前该做什么、如何可靠地建立模型、如何稳健地评估模型、如何公平地比较模型,以及如何报告结果。
HN 为什么提它
输入里没有保留下来的评论摘录,无法判断 HN 上的人为什么反复提它;只知道它在 2021 至 2024 年间被 4 个人在 3 个月里提及。
教程难度 2 / 5约 40 分钟经得起时间
读之前最好知道
1机器学习基础(训练、验证、测试集)
2模型评估指标
3交叉验证与统计检验
4数据泄漏(data leakage)
学习路径
读这篇之前,按顺序读书架上的 1 篇 · 参考文献来自 OpenAlex,顺序和要点由 Claude Code 排出候选里只有一篇关于可解释模型的立场论文与本指南直接相关,其余多为 Transformer 变体与深度学习综述,路径很短。
- 1
指南在讨论模型解释时引用了这篇立场论文,它主张高风险场景用可解释模型。
读可解释模型与事后解释黑箱的区别,以及高风险决策中应选用前者的论证。
- 2How to avoid machine learning pitfalls: a guide for academic researchers
目标论文:按建模前、建模、评估、比较、报告五个阶段列出常见机器学习错误。
读每个阶段的常见错误清单,尤其是数据泄漏、评估设置与模型比较的部分。
HN 书评
没有评论直接链到它;下面是它被提交的讨论串里回复最多的评论(不计入统计)讨论串评论stellaathena · 2021-08
被提交为 story · 5 次
- How to avoid machine learning pitfalls: a guide for academic researchers ↗Anon84 · 2021-08-07 · 5 分
- How to avoid machine learning pitfalls: a guide for academic researchers ↗jensgk · 2021-08-08 · 3 分
- How to avoid machine learning pitfalls: a guide for academic researchers ↗sebg · 2021-08-12 · 1 分
- How to avoid machine learning pitfalls: a guide for academic researchers ↗Anon84 · 2023-03-09 · 1 分
- How to avoid machine learning pitfalls ↗golergka · 2024-04-20 · 7 分