按年被提到
20152015 · 5 次2026
强化学习与智能体›博弈与游戏 AI·arXiv:1509.01549 · cs.AI

Giraffe: Using Deep Reinforcement Learning to Play Chess

Giraffe:用深度强化学习下国际象棋
Matthew Lai · 2015

靠自我对弈学评估函数的神经网络国际象棋引擎

开始阅读 ↗PDFalphaXiv 讨论
被推荐 · 10 人首次 2015-09-14 · 最近 2017-12-06
10不同的人
5活跃月份
10讨论串
68被引(OpenAlex)

报告介绍 Giraffe,一个通过自我对弈自己发现全部领域知识、几乎不靠人工知识的国际象棋引擎。以往只用机器学习去调手工评估函数的参数,而它还自动完成特征提取和模式识别;训练出的评估函数与顶级引擎里由专家多年手工打磨的评估相当,是当时用端到端机器学习下棋最成功的尝试。

HN 为什么提它

评论者把它当作神经网络下棋的早期例子:只学评估函数而非策略、网络其实很浅,作者后来加入 DeepMind,常拿来和 AlphaGo 对照。

方法难度 3 / 5约 35 分钟经得起时间
读之前最好知道
1国际象棋引擎基础(alpha-beta 搜索)
2强化学习与自我对弈
3神经网络基础

学习路径

读这篇之前,按顺序读书架上的 1 篇 · 参考文献来自 OpenAlex,顺序和要点由 Claude Code 排出

候选里只有 DQN 与目标直接相关:先看深度强化学习如何从原始输入学习价值函数,再读 Giraffe 如何用自我对弈学习国际象棋的评估函数。

  1. 1
    Playing Atari with Deep Reinforcement Learning用深度强化学习玩 Atari 游戏 · 2013

    DQN 用神经网络加 Q 学习学价值函数,是 Giraffe 用神经网络学评估函数的同类思路。

    读用神经网络近似价值函数,以及经验回放的概念;跳过 Atari 各游戏的结果。

  2. 2
    Giraffe: Using Deep Reinforcement Learning to Play ChessGiraffe:用深度强化学习下国际象棋 · 2015 · 就是这篇

    目标论文:靠自我对弈和时序差分,让神经网络自己学出国际象棋评估函数。

    读评估函数的特征表示、自我对弈训练流程,以及它与手写评估函数引擎的对比。

HN 书评

推荐在前,同类按时间 · 每篇最多保留 20 条,统计用全部提及
推荐jhartmann · 2016-03

“there is another already Open Source Neural Network Chess engine that might be worth exploring for similar ideas.”

推荐另一个开源神经网络国际象棋引擎,其思路可能值得借鉴
Spawkfish: Neural network chess原评论 ↗
批评gwern · 2017-12

“But like the original AG, it struggles to learn”

Mastering Chess and Shogi by Self-Play with General Reinforcement Learning原评论 ↗
引用cs702 · 2015-09

“Interestingly, the neural net used is not really that deep: it has only two hidden layers (see figure 3 in the paper[1]).”

指出 Giraffe 的网络其实不深,只有两层隐藏层
Deep Learning Machine Teaches Itself International Master Level Chess in 72 HRs原评论 ↗
引用ColinWright · 2015-09

“Full summary:”

给出完整摘要:深度 RL 国际象棋引擎 72 小时达到大师水平
In just 72 hours a deep learning engine has learned chess to Master level原评论 ↗
引用shmageggy · 2017-10

“The main thing there is that he only learns an evaluation function, not a policy.”

指出它只学习评估函数而不学习策略
AlphaGo Zero: Learning from scratch原评论 ↗
引用naveen99 · 2017-11

“There was a project for chess, called giraffe [LINK] whose author shut it down after joining google deep mind”

提到 Giraffe 项目,作者加入 DeepMind 后将其停掉
Alpha Go Zero: How and Why It Works原评论 ↗
看全部 7 条 →
引用kyberias · 2017-11

“[1] Giraffe”

引用它作为通过深度强化学习自我对弈学下棋的国际象棋引擎
AI Uses Less Than Two Minutes of Videogame Footage to Recreate Game Engine原评论 ↗
被提交为 story · 3 次