按年被提到
20232025 · 2 次2026
机器学习与深度学习›神经科学启发的 AI·arXiv:2309.14030 · cs.HC

DeWave: Discrete EEG Waves Encoding for Brain Dynamics to Text Translation

DeWave:用离散脑电波编码做脑信号到文本的翻译
Yiqun Duan, Jinzhao Zhou, Zhen Wang, Yu-Kai Wang, Chin-Teng Lin · 2023

把离散化的 EEG 脑电波编码并翻译成文本,无需眼动标记

开始阅读 ↗PDFalphaXiv 讨论
被推荐 · 3 人首次 2023-12-17 · 最近 2025-08-04
3不同的人
4活跃月份
4讨论串
37被引(OpenAlex)

现有的脑电到文本方法需要眼动注视点或事件标记,才能把脑信号切分成词级特征。DeWave 用量化变分编码器得到离散的 codex 编码,并与预训练语言模型对齐,借助文本与 EEG 的对比对齐训练,能在没有标记的原始脑波上直接翻译,同时缓解个体差异带来的干扰。在 ZuCo 数据集上它超过此前基线 3.06% 和 6.34%,达到 41.35 BLEU-1 和 33.71 Rouge-F,并称是首个无需词级顺序标记就能翻译整段 EEG 信号的工作。

HN 为什么提它

评论者把它当作脑机接口借助 LLM 解码脑信号的代表进展,称其是一大步,同时指出结果仍有幻觉,且这方面的发展被报道得不够。

方法难度 4 / 5约 40 分钟有时效性
读之前最好知道
1脑电图(EEG)基础
2向量量化变分自编码器(VQ-VAE)
3预训练语言模型
4对比学习(contrastive learning)

HN 书评

推荐在前,同类按时间 · 每篇最多保留 20 条,统计用全部提及
推荐ShamelessC · 2023-12

“seems like a massive step forward.”

称这项把脑信号译成文本的工作是巨大进步,尽管有幻觉
BrainGPT Turns Thoughts into Text原评论 ↗
引用bbor · 2024-06

“this paper is what first alerted me to this underreported situation”

说这篇论文让自己第一次注意到脑电读心这一被忽视的进展
Human neuroscience mustn't forget its human dimension原评论 ↗
引用magicalhippo · 2025-05

“Researchers ate already able to translate thoughts into text[1][2] by wearing a special cap with a fair amount of accuracy.”

拿它说明研究者已能用脑电帽把想法译成文本
Coding without a laptop: Two weeks with AR glasses and Linux on Android原评论 ↗
引用bbor · 2025-08

“BCI (Brain-Computer interaction) is blowing up right now thanks to the unreasonable efficacy of LLMs for decoding brain activity[2][3][4]”

引用它说明 LLM 解码脑活动的惊人效果让 BCI 迅速升温
Scientists shine a laser through a human head原评论 ↗