“there is another already Open Source Neural Network Chess engine that might be worth exploring for similar ideas.”
Giraffe: Using Deep Reinforcement Learning to Play Chess
靠自我对弈学评估函数的神经网络国际象棋引擎
报告介绍 Giraffe,一个通过自我对弈自己发现全部领域知识、几乎不靠人工知识的国际象棋引擎。以往只用机器学习去调手工评估函数的参数,而它还自动完成特征提取和模式识别;训练出的评估函数与顶级引擎里由专家多年手工打磨的评估相当,是当时用端到端机器学习下棋最成功的尝试。
评论者把它当作神经网络下棋的早期例子:只学评估函数而非策略、网络其实很浅,作者后来加入 DeepMind,常拿来和 AlphaGo 对照。
学习路径
读这篇之前,按顺序读书架上的 1 篇 · 参考文献来自 OpenAlex,顺序和要点由 Claude Code 排出候选里只有 DQN 与目标直接相关:先看深度强化学习如何从原始输入学习价值函数,再读 Giraffe 如何用自我对弈学习国际象棋的评估函数。
- 1
DQN 用神经网络加 Q 学习学价值函数,是 Giraffe 用神经网络学评估函数的同类思路。
读用神经网络近似价值函数,以及经验回放的概念;跳过 Atari 各游戏的结果。
- 2Giraffe: Using Deep Reinforcement Learning to Play Chess
目标论文:靠自我对弈和时序差分,让神经网络自己学出国际象棋评估函数。
读评估函数的特征表示、自我对弈训练流程,以及它与手写评估函数引擎的对比。
HN 书评
推荐在前,同类按时间 · 每篇最多保留 20 条,统计用全部提及“But like the original AG, it struggles to learn”
“Interestingly, the neural net used is not really that deep: it has only two hidden layers (see figure 3 in the paper[1]).”
“Full summary:”
“The main thing there is that he only learns an evaluation function, not a policy.”
“There was a project for chess, called giraffe [LINK] whose author shut it down after joining google deep mind”
看全部 7 条 →
“[1] Giraffe”
- Giraffe: Using Deep Reinforcement Learning to Play Chess ↗nikhilarundesai · 2015-09-14 · 3 分
- Giraffe: Using Deep Reinforcement Learning to Play Chess ↗Schiphol · 2015-09-15 · 17 分
- Giraffe: Using Deep Reinforcement Learning to Play Chess ↗te · 2015-09-23 · 6 分