AI写作特征研究:Opus 5.5高频写“这很重要”,各类大模型仍存在专属文字破绽

早报4周前发布 小马良
49 0

随着大模型生成文本大量普及,如何识别AI写作内容一直是大家关心的问题。营销公司Graphite开展一项研究,统计前沿大模型的用词习惯,筛选AI文本独有的高频短语。

曾经经典的识别特征(频繁破折号、delve这类书面词)已经被模型优化掉,但研究发现模型依旧存在大量可识别的写作习惯。研究定义:在AI文本中出现频率达到人类文本2倍以上的短语,即为AI破绽,本次一共找到13000组这类短语。

研究团队选用ChatGPT上线之前的10000篇人类文章作为对照组,让不同AI模型基于摘要重写文章,尽量规避原文内容带来的偏差,对比人机文本在短语、句式结构上的差异。

各模型标志性文字特征

  1. Claude Opus 5.5
  • 关键词dependable,出现频率是人类写作的23倍
  • 不再大量使用「不是X,而是Y」句式,但偏爱is more than an X, it's a Y结构
  • 标志性短语:this matters(这很重要)出现频率高出人类116倍;why X matters高出92倍,习惯反复强调一件事的价值。
  1. OpenAI Astra
  • 喜欢描述事物拥有another dimension(另一重维度)
  • 习惯用may provide / can provide这类措辞弱化断言,进行表述对冲
  • 最典型特征:纠正性框架句式,not simply X、rather than relying on X,这类句式出现频率超过人类文本100倍。

旧破绽被修复,但新特征不断冒出来

各大厂商已经针对性优化了广受诟病的破折号滥用问题:

  • Opus 5.5相比Opus 5,破折号使用量下降99%
  • Astra破折号使用量比人类样本少88%
  • Gemini 3.1 Pro几乎完全移除了文本里的破折号

但研究负责人Greg Druck指出:破绽总数并没有减少。 模型只是把最广为人知的特征去掉,又会冒出全新的专属表达习惯,每个模型版本都带有独有的文字指纹。

虽然Anthropic、OpenAI在新版本发布宣传里,都强调模型行文更自然、减少怪异措辞。但Druck认为厂商很难彻底根除这类特征。

他提出猜想:实验室对这类表达模式的可控程度有限。数十亿参数巨型模型,测试覆盖范围存在边界,总会有这类语言特征遗漏。

同时研究还有一个有意思结论:Claude系列随迭代,词汇分布越来越贴近人类;而GPT系列模型,反而和人类写作的差距在变大。

要点总结

  1. 研究背景:Graphite使用预ChatGPT时代人类文章做对照组,找到13000个AI高频短语;旧识别特征(大量破折号)被模型修复。
  2. 模型指纹:Opus5.5疯狂使用“this matters”;Astra高频使用not simply X这类纠正句式。
  3. 核心结论:消除单个破绽没用,新的文字习惯会持续出现;厂商很难彻底清除这类AI写作痕迹。
  4. 额外发现:Claude越迭代越贴近人类用词,GPT系列迭代后和人类文本差异反而扩大。
© 版权声明

相关文章