按年被提到
20252026 · 2 次2026
机器学习与深度学习›神经科学启发的 AI·arXiv:2505.05522 · cs.LG

Continuous Thought Machines

连续思维机器
Luke Darlow, Ciaran Regan, Sebastian Risi, Jeffrey Seely, Llion Jones · 2025

引入神经元级时序处理与同步的类脑新架构 CTM

开始阅读 ↗PDFalphaXiv 讨论
被推荐 · 3 人首次 2025-11-30 · 最近 2026-06-05
3不同的人
3活跃月份
3讨论串
2被引(OpenAlex)

论文认为多数人工神经网络忽略了单个神经元的复杂性,提出 Continuous Thought Machine(CTM),把神经元层面的时间动态作为核心表示。它有两点创新:每个神经元用各自独特的权重处理输入历史,以及把神经元同步作为隐表示。CTM 在 2D 迷宫、ImageNet-1K 分类、奇偶校验等任务上展示了性能与通用性,内部表示丰富、便于解释,还支持自适应计算(简单任务提前停止)。作者强调目的是分享这一架构而非刷新 SOTA。

HN 为什么提它

评论者把它当作受生物启发、不同于标准 Transformer 的独特架构来推荐,有人认为其循环式结构有效且更接近人类。

方法难度 4 / 5约 60 分钟经得起时间
读之前最好知道
1神经网络与循环架构
2神经动力学与神经同步(neural synchronization)
3注意力机制
4自适应计算(adaptive compute)

HN 书评

推荐在前,同类按时间 · 每篇最多保留 20 条,统计用全部提及
推荐FuckButtons · 2026-03

“You might be interested in this paper: Continuous Thought Machines”

推荐这篇论文,它的有界卷积循环架构有效且更像人
Show HN: How I Topped the HuggingFace Open LLM Leaderboard on Two Gaming GPUs原评论 ↗
引用granitepail · 2026-06

“It is very biologically inspired and unique.”

称赞它受生物启发且独特,是超越 vanilla transformer 的基础研究
Sakana AI's Recursive Self-Improvement (RSI) Lab原评论 ↗
被提交为 story · 1 次