按年被提到
20242025 · 5 次2026
AI 安全、伦理与社会影响›大模型与人类行为·arXiv:2410.16107 · cs.CL

Do LLMs write like humans? Variation in grammatical and rhetorical styles

LLM 的写作像人类吗?语法与修辞风格的差异
Alex Reinhart, Ben Markey, Michael Laudenbach, Kachatad Pantusen, Ronald Yurko, Gordon Weinberg, David West Brown · 2024

用 Biber 语言学特征比较 LLM 与人类写作风格的差异

开始阅读 ↗PDFalphaXiv 讨论
被推荐 · 3 人首次 2024-12-17 · 最近 2026-10-29
3不同的人
9活跃月份
11讨论串
76被引(OpenAlex)

作者用 Llama 3 的多个变体和 GPT-4o,基于相同提示构造人类与 LLM 的平行语料,并用 Douglas Biber 的词汇、语法和修辞特征集进行比较。结果发现人类与 LLM、以及不同 LLM 之间存在系统性的风格差异,这些差异不因模型变大而消失,且指令微调模型的差异比基座模型更大。

HN 为什么提它

评论者用它解释 LLM 文本为什么有可辨认的“AI 腔”:差异不只在用词,还在语法和修辞,且指令微调模型比基座模型更明显;作者本人也在评论中现身。

实证研究难度 2 / 5约 35 分钟有时效性
读之前最好知道
1指令微调(instruction tuning)与基座模型
2语料语言学(corpus linguistics)基础
3基本统计分析

学习路径

读这篇之前,按顺序读书架上的 2 篇 · 参考文献来自 OpenAlex,顺序和要点由 Claude Code 排出

候选里与语言模型写作风格直接相关的不多。这条路径只挑出 GPT-3(LLM 写作能力的起点)和一篇估计 LLM 参与文本比例的工作,作为理解研究动机的背景。

  1. 1
    Language Models are Few-Shot Learners语言模型是少样本学习者 · 2020

    说明大模型仅凭提示就能写出流畅文本,是后续比较人类与 LLM 写作的起点。

    读少样本提示与大规模语言模型的生成能力;不必细读各任务评测。

  2. 2
    Monitoring AI-Modified Content at Scale: A Case Study on the Impact of ChatGPT on AI Conference Peer Reviews大规模监测 AI 修改的内容:ChatGPT 对 AI 会议同行评审影响的案例研究 · 2024

    研究 AI 改写文本在真实语料中的占比,与目标论文区分人类与 LLM 文本的动机相关。

    读如何用词汇分布估计 LLM 修改文本的比例,以及发现的用词偏好差异。

  3. 3
    Do LLMs write like humans? Variation in grammatical and rhetorical stylesLLM 的写作像人类吗?语法与修辞风格的差异 · 2024 · 就是这篇

    目标论文:用 Biber 语言学特征比较 Llama 3 与 GPT-4o 和人类写作的语法与修辞风格。

    读两套平行语料的构建、Biber 特征的统计方法,以及指令微调前后风格差异的结果。

HN 书评

推荐在前,同类按时间 · 每篇最多保留 20 条,统计用全部提及
推荐capnrefsmmat · 2025-02

“I'm biased (as an author), but I think Figure 3 is the key result, as well as Tables 4 and 5 in the appendix.”

作为作者推荐图 3 和附录表 4、5,是论文关键结果
Do LLMs write like humans? Variation in grammatical and rhetorical styles原评论 ↗
引用nomat · 2024-12

“the authors of this paper[0] were able to use AI to figure out if a block of text was written by AI, so hopefully this becomes a tool available to educators very soon.”

指出作者用 AI 判断文本是否 AI 所写,希望尽快成为教育者的工具
Inside the university AI cheating crisis原评论 ↗
引用capnrefsmmat · 2025-02

“And the shift isn't just vocabulary, it's also in grammar and rhetorical style.”

引它说明 LLM 的差异不只是词汇,还在语法和修辞风格
引用capnrefsmmat · 2025-07

“(See table 3 of the paper.)”

请参见论文表 3,了解 ChatGPT 的语法风格特征
Lightfastness Testing of Colored Pencils原评论 ↗
引用capnrefsmmat · 2025-07

“Comparing base and instruction-tuned models, the base models are vaguely human in style, while instruction-tuned models systematically prefer certain types of grammar and style features.”

引它说明基座模型风格近似人类,指令微调模型则系统地偏好某些语法风格
Don't Fall for AI: Reasons for Writers to Reject Slop原评论 ↗
引用capnrefsmmat · 2025-08

“Our experience is that LLMs like GPT-4o have a particular writing style”

引自己的经验:GPT-4o 这类 LLM 有特定的写作风格
Researchers find evidence of ChatGPT buzzwords turning up in everyday speech原评论 ↗
看全部 11 条 →
引用capnrefsmmat · 2026-03

“preprint at Do LLMs write like humans? Variation in grammatical and rhetorical styles. Working on extending this to more recent models and other grammatical features now”

贴出预印本,用现在分词等语法特征区分 GPT-4o 与人类,并正在扩展到新模型
LLM Writing Tropes.md原评论 ↗
引用gabceboli · 2026-06

“The main sources I used are these:”

列为主要资料来源:LLM 与人类写作在语法和修辞风格上的差异
Show HN: Isitslop.xyz, a free AI-writing detector built on latest research原评论 ↗
引用capnrefsmmat · 2026-08

“the writing style is not because of the training texts, but because of whatever tasks the LLM companies do in instruction tuning.”

认为写作风格并非来自训练文本,而是来自指令微调任务
Humanising LLM Outputs Is Dumb原评论 ↗
引用capnrefsmmat · 2026-09

“much more human-like.”

引它说明基座模型写作明显更接近人类
Claude's Load-Bearing Seams原评论 ↗
引用capnrefsmmat · 2026-10

“can show specifically which writing features change: Do LLMs write like humans? Variation in grammatical and rhetorical styles”

引它说明人类与 AI 文本之间具体哪些写作特征发生了变化
LLM Voice原评论 ↗