如何识别AI生成的内容

AI幽灵正在英语世界游荡。这个语言幽灵能写散文、诗歌、新闻稿，甚至企业套话，还能模仿莎士比亚的十四行诗或海明威的简洁文风。它速度快得惊人，一分钟能吐出几千字——海明威一天都写不了这么多，而且他需要更多威士忌。文字工作者们慌了神。 AI写作的痕迹可以从用词、标点、句子和段落结构中分辨出来，但它的特征可能和你想象的不太一样，部分原因是随着软件更新，AI的写作风格也在变化。彭博社报道称，AI写作无处不在：你的收件箱里、领英信息流里，互联网上超过三分之一的新网站内容都由AI起草。大型语言模型（LLM）在帮学生写论文，可能也在帮科学家写论文。有人声称今年英联邦短篇小说奖的获奖作品是AI生成的，评委还称赞其“安静的权威感”（英联邦基金会否认了这一说法）。 LLM有文体上的怪癖。它们倾向于大量使用长破折号，爱用“最大化”这类词，喜欢“深潜”（更爱用“钻研”）进世界的“丰富织锦”中。AI写作不是靠某个单词或短语就能识别的，而是靠一堆特征的综合。 识别AI文本并不容易，部分原因是你需要超越几个词或破折号的证据：仅仅因为文本用了“钻研”就断定是AI写的，就像因为用了“轻率”就断定是简·奥斯汀写的一样荒谬。机器人写作方式也各有不同。波兰格但斯克大学的语言学家卡罗琳娜·鲁德尼茨卡解释说，AI写作没有单一风格，就像人类写作也没有单一风格一样。作家有个性特征——比如艾米莉·狄金森爱用破折号——机器人可能也有。 但确实有几种方法可以识别LLM生成的文本。一种是使用检测算法，这些算法经过训练能识别人类或AI散文的质感。领先的检测公司Pangram声称准确率高达99.98%，已与博客平台Substack合作推出相关工具。不过检测器是黑箱算法，可能产生误报，而且不会给出判断理由。研究人员还尝试扫描可疑词汇，或对比LLM向公众开放前后的论文。但这些方法也有缺陷，尤其是很难将AI的怪癖与其他语言趋势区分开来。 要发现AI的特征，可以对比人机写作。这需要一个独特且熟悉的基准。《经济学人》选择了自己确信是纯人工、读者也熟悉的文章。他们设计了一项研究，让顶级LLM——OpenAI的ChatGPT、Anthropic的Claude、谷歌的Gemini和xAI的Grok——在不查阅网络的情况下改写自家文章。这得到了一个包含55,940个句子、120万单词的人机创作语料库。为确保检测的是AI特征而非自身风格，他们还将AI文本与CNN、《纽约时报》和《华盛顿邮报》的新闻报道对比，并用1950年至2022年间出版的热门小说节选作为另一项测试。 研究结果出人意料。AI散文确实可以通过用词、标点、句子和段落结构来区分，但其标志性特征并非你预期的那样，部分原因是AI的写作风格随软件更新而变化。这并不意味着LLM是优秀作家：它们的散文缺乏清晰度和优雅感，往往流于公式化。所以那些想给人留下深刻印象的人——无论是人类还是机器——可能需要重新考虑策略了。