AI 检测器是怎么工作的?通俗讲解 AIGC 检测原理
简短回答
AI 检测器是一个用大量人类与 AI 写作样本训练出来的分类器。它学习两者在统计上的差异,主要是用词的可预测程度,按窗口和句子给文本打分,再用阈值给出结论。因为它估计的是规律,而不是核查作者是谁,所以输出永远只是概率,不是证据。
要点
- 检测器是一个训练过的分类器:它见过大量人类和 AI 的文本,并学会了区分两者的统计特征。
- 主要的信号是可预测性。语言模型倾向于选择最可能的词,生成的文字往往比大多数人类写作更顺滑、更均匀。
- 文本是按窗口和句子打分的,所以检测器才能高亮单个段落。
- 阈值把分数变成结论,校准则用来设定阈值,使误报保持在低位。
- 因为它看的是规律而不是谁写了文字,所以检测器在两个方向上都可能出错。
基本思路:从样本中学习
没有人会写下一份“AI 文本长什么样”的规则清单。开发者的做法是,收集一大批确定由人写的文本,再收集一批确定由 AI 模型生成的文本。然后训练一个机器学习模型,也就是分类器,让它找出能把两组文本区分开的各种规律。
训练之后,给分类器一段新文本,它会返回一个数字:这段文本与 AI 样本相比、与人类样本相比,分别有多相似。我们的检测器是自托管的开源模型,只支持英文。
为什么可预测性是核心线索
语言模型写作时,是根据前面的内容,不断选择最可能出现的下一个词。人类的选择则没那么容易预测。我们会在句子中途改变主意,用一个不常见的词,加入一段题外话,或者为了强调而打破节奏。
结果就是,机器文本往往在词汇和句子长度上更顺滑、更均匀,内容也更笼统。检测器正是捕捉到了这一点。这也是为什么非常谨慎、套路化的人类写作,有时会和机器写作相似。
窗口、句子与分数
长文本不是整体一次打分的。检测器会查看窗口(即一段连续的文字)和单个句子,然后把结果合并。这就是逐句高亮的由来,它显示文本中哪些部分拉高了整体结果。
高亮对修改很有帮助,因为较高的结果通常来自少数几段空泛的文字,而不是整篇文章。但它们仍然只是估计。被高亮的句子是在统计上看起来像 AI 用词的句子,而不是被证明是机器写的句子。
- 不足 50 词时证据太少,所以我们的检测器不给出结论。
- 文本越长,结果越稳定,因为可以平均的内容更多。
- 人类与 AI 混合写成的文本,可能在某些地方出现高亮,在另一些地方则没有。
阈值与校准
原始分数必须变成结论,这就是阈值的作用。阈值低,标记的文本多,能抓到更多 AI,但也会抓到更多人类写作;阈值高,标记的文本少,对诚实的写作者更友好,但会漏掉更多 AI 文本。
校准就是根据测量结果来选定阈值的工作。我们用 583 篇人类学术文本来设定阈值,使误报保持在低位:在两组留出数据上,人类学术文本被标为“很可能由 AI 撰写”的比例分别为 1% 和 0.7%。在“很可能由人撰写”与“很可能由 AI 撰写”之间,还有一个“不确定”区间,用来容纳处于边界的结果。
为什么答案永远只是概率
检测器看不到写作过程。它只看到写完的文字,而人类文本和机器文本是有重叠的。有些人写得非常像机器,有些 AI 文本则被编辑到看起来非常像人写的。建立在重叠规律之上的东西,只能给出可能性。
这就是为什么绝不应该只凭一个结果去指控别人。它只是一个信号,必须结合草稿、版本历史、写作者的其他作业,以及一次真正的交谈来解读。
检测器能看到什么,看不到什么
检测器擅长发现它所训练过的那类模型的未经编辑的输出。在我们的测试中,未经编辑的 2026 年 AI 文本有 96.9% 被标为“很可能由 AI 撰写”。当文本被改写后,它们就会变弱:被另一款 AI 模型改写后仍被标记的有 50.5%,经“人性化”工具处理后为 59.5%;在非常短的文本以及训练范围之外的文体上更弱,比如广告文案,人类撰写的网页文本中有 32.7% 被标为“很可能由 AI 撰写”。
你可以亲自看看这一切。AITurnitin 无需注册即可免费检测最多 1,000 词,显示逐句高亮,并在 24 小时内删除你的文本,不会用于训练。
常见问题
AI 检测器怎么知道文字是不是 AI 写的?
它并不知道。它估计的是用词与它所训练过的 AI 文本的规律有多相似,主要是用词选择有多可预测,然后返回一个概率。
AI 检测中的困惑度是什么?
它衡量一段文字对语言模型来说有多出乎意料。困惑度越低,说明用词越可预测,这是检测器使用的信号之一。现代检测器会把它与其他学习到的特征结合起来。
为什么检测器能高亮单个句子?
因为文本是按窗口和句子打分的。每个部分都有自己的估计,再合并成整体结果。句子高亮显示的是规律最强的地方。
AI 检测器会保存我的文本,或从中学习吗?
这取决于具体的工具。我们会在 24 小时内删除文本,也从不用于训练。在粘贴毕业论文或个人陈述之前,请先查看任何工具的隐私政策。
AI 检测器能被骗过吗?
文本被改写后,检测会变弱,但不会消失:在我们的测试中,很大一部分被改写和“人性化”处理过的文本仍被标为“很可能由 AI 撰写”。这些工具还可能损害原意和引用,用它们来掩盖 AI 的使用,也可能违反你所在院校的诚信规定。