按年被提到
20242024 · 7 次2026
大模型与语言模型›检索增强与知识库·arXiv:2401.18059 · cs.CL

RAPTOR: Recursive Abstractive Processing for Tree-Organized Retrieval

RAPTOR:面向树状检索的递归抽象式处理
Parth Sarthi, Salman Abdullah, Aditi Tuli, Shubh Khanna, Anna Goldie, Christopher D. Manning · 2024

递归地对文本块嵌入、聚类、摘要成树,检索时跨层次整合长文档信息。

开始阅读 ↗PDFalphaXiv 讨论
被提及 · 7 人首次 2024-03-06 · 最近 2024-09-21
7不同的人
3活跃月份
5讨论串
123被引(OpenAlex)

多数检索增强方法只检索较短的连续文本块,不利于整体理解文档。RAPTOR 自底向上递归地对文本块做嵌入、聚类和摘要,构建出带有不同摘要层次的树;推理时从这棵树中检索,整合长文档里不同抽象层次的信息。受控实验显示它相对传统检索增强语言模型有明显提升;与 GPT-4 结合后,在 QuALITY 基准上把最佳成绩提高了绝对 20% 的准确率。

HN 为什么提它

评论者在讨论 RAG 如何处理长文档、是否用 LLM 对聚类后的段落做摘要时引用它,作为分层、树状检索能带来提升的代表做法。

方法难度 3 / 5约 30 分钟经得起时间
读之前最好知道
1检索增强生成(RAG)
2文本嵌入与聚类
3LLM 摘要
4长文档问答基准(如 QuALITY)

HN 书评

推荐在前,同类按时间 · 每篇最多保留 20 条,统计用全部提及
引用reerdna · 2024-03

“Sounds a little like this recent paper;”

觉得当前做法有点像这篇新论文:递归汇总并聚类文本块的树状检索
Pg_vectorize: Vector search and RAG on Postgres原评论 ↗
引用CuriouslyC · 2024-03

“RAPTOR was just published and is close to SoTA, and from a quick read I can already think of several directions to improve it”

称 RAPTOR 刚发表且接近 SoTA,粗读后已想到几个改进方向
Pg_vectorize: Vector search and RAG on Postgres原评论 ↗
引用homarp · 2024-03

“It introduces a novel approach of recursively embedding, clustering, and summarizing chunks of text”

概述它的新做法:对文本块递归嵌入、聚类并汇总
Raptor: Recursive Abstractive Processing for Tree-Organized Retrieval原评论 ↗
引用jimmySixDOF · 2024-03

“Also the code for Raptor came out recently and they are showing gains through a tree/hierarchy too.”

指出 RAPTOR 代码刚发布,其树状层级结构同样带来提升
Show HN: Out-of-the-box text classification models原评论 ↗
引用newpeak · 2024-05

“Instead, using LLM to generate a summary based on the clustering of paragraphs could be a good alternative. That's what RAPTOR has suggested.”

引 RAPTOR 为例:用 LLM 为聚类后的段落生成摘要,替代逐段打标签
Ask HN: RAG and unstructured data from several docs原评论 ↗
引用williamcotton · 2024-09

“RAPTOR: Recursive Abstractive Processing for Tree-Organized Retrieval [3]”

列出 RAPTOR 作为检索相关参考
Contextual Retrieval原评论 ↗
看全部 7 条 →
引用santiagobasulto · 2024-09

“RAPTOR for example is a technique that groups and clusters documents together, summarizes them, and creates embeddings defining a sort of a Tree.”

用 RAPTOR 举例说明:对文档聚类、汇总并嵌入成一棵树
Contextual Retrieval原评论 ↗