SlopShape：仅凭结构识破AI生成内容
Training a model to identify AI-generated web content from structure alone
传统的词级检测器在文本被改写后往往失效，但这项研究提出了更深层的解决方案：通过分析文章的结构签名来识别AI生成内容。研究团队利用SlopShape工具，对比了2250篇人类撰写的博客与11250篇由前沿模型生成的AI镜像内容。结果显示，仅凭187个结构特征，系统在98.0%的准确率上成功区分了两者，即便AI文本经过自身模型的重写，识别率依然稳定在98.1%。AI生成的内容往往呈现出一种整洁且自我宣告的特定形态，而人类写作则占据着罕见的结构配置。这一发现不仅复现了StoryScope在虚构文学中的结论，更在商业内容领域展现出更强的信号强度，为识别AI内容提供了全新的视角。
AI生成的帖子共享一种整洁且自我宣告的形态，而人类帖子则占据着罕见的结构配置。
HN 评论区
22- evantbyrne
我立刻发现，对于 ChatGPT 问世前写的内容，该系统出现了误报。当它把“在结论中重述论点”视为信号时，其方法论的错误显而易见。
- BobbyTables2
有些人就是非常像机器人。
今天我在客服电话里花了 20 分钟。那位客服代表的说话方式太像机器人了（无论是语调还是用词），前 15 分钟我非常有把握认为对方是 AI。我几乎确定是自动 AI 系统把我转接给了一个更高级的 AI……
结果人家很可能只是身处某个低成本的拉美国家，正在拼命努力罢了。想到有人会被逼到这种地步，我心里挺不是滋味的。
- DylanMerigaud
仅凭结构就能区分 AI 生成的内容，这个思路挺有意思。