随着大模型生成文本大量普及,如何识别AI写作内容一直是大家关心的问题。营销公司Graphite开展一项研究,统计前沿大模型的用词习惯,筛选AI文本独有的高频短语。
曾经经典的识别特征(频繁破折号、delve这类书面词)已经被模型优化掉,但研究发现模型依旧存在大量可识别的写作习惯。研究定义:在AI文本中出现频率达到人类文本2倍以上的短语,即为AI破绽,本次一共找到13000组这类短语。
研究团队选用ChatGPT上线之前的10000篇人类文章作为对照组,让不同AI模型基于摘要重写文章,尽量规避原文内容带来的偏差,对比人机文本在短语、句式结构上的差异。
各模型标志性文字特征
- 关键词
dependable,出现频率是人类写作的23倍 - 不再大量使用「不是X,而是Y」句式,但偏爱
is more than an X, it's a Y结构 - 标志性短语:
this matters(这很重要)出现频率高出人类116倍;why X matters高出92倍,习惯反复强调一件事的价值。
- 喜欢描述事物拥有
another dimension(另一重维度) - 习惯用
may provide / can provide这类措辞弱化断言,进行表述对冲 - 最典型特征:纠正性框架句式,
not simply X、rather than relying on X,这类句式出现频率超过人类文本100倍。
旧破绽被修复,但新特征不断冒出来
各大厂商已经针对性优化了广受诟病的破折号滥用问题:
- Opus 5.5相比Opus 5,破折号使用量下降99%
- Astra破折号使用量比人类样本少88%
- Gemini 3.1 Pro几乎完全移除了文本里的破折号
但研究负责人Greg Druck指出:破绽总数并没有减少。 模型只是把最广为人知的特征去掉,又会冒出全新的专属表达习惯,每个模型版本都带有独有的文字指纹。
虽然Anthropic、OpenAI在新版本发布宣传里,都强调模型行文更自然、减少怪异措辞。但Druck认为厂商很难彻底根除这类特征。
他提出猜想:实验室对这类表达模式的可控程度有限。数十亿参数巨型模型,测试覆盖范围存在边界,总会有这类语言特征遗漏。
同时研究还有一个有意思结论:Claude系列随迭代,词汇分布越来越贴近人类;而GPT系列模型,反而和人类写作的差距在变大。
要点总结
- 研究背景:Graphite使用预ChatGPT时代人类文章做对照组,找到13000个AI高频短语;旧识别特征(大量破折号)被模型修复。
- 模型指纹:Opus5.5疯狂使用“this matters”;Astra高频使用not simply X这类纠正句式。
- 核心结论:消除单个破绽没用,新的文字习惯会持续出现;厂商很难彻底清除这类AI写作痕迹。
- 额外发现:Claude越迭代越贴近人类用词,GPT系列迭代后和人类文本差异反而扩大。
© 版权声明
文章版权归作者所有,未经允许请勿转载。















