引用hammyhavoc · 2024-06
“Ten bucks says there's LLM-generated content in encyclopedias today because LLMs have been mainstream for a few years now”
打赌如今的百科里已有 LLM 生成的内容,学术出版同样被其渗透
用群体统计框架估计科研论文中 LLM 改写内容的占比
论文用群体层面的统计框架,分析 2020 年 1 月至 2024 年 2 月 arXiv、bioRxiv 与 Nature 系列期刊的 950,965 篇论文,度量被 LLM 修改的内容占比。结果显示 LLM 使用稳步上升,计算机科学增长最快、最高达 17.5%,数学与 Nature 系列最低、最高达 6.3%;高占比还与首作者更频繁发预印本、研究领域更拥挤、论文更短相关。
评论者把它当作证据,说明 LLM 生成的文字正在渗透学术出版,进而推断百科等文本中也已混入 LLM 内容。
“Ten bucks says there's LLM-generated content in encyclopedias today because LLMs have been mainstream for a few years now”