做内容审核或学术诚信检查的会想看这篇:它用公式证明检测器在 10 token 短文本上误报率会从 1% 飙到 29%,Binoculars 真阳性率最高也只有 59%,还给了分长度校准和自动弃权的具体做法,可以直接照着实现。
#AI text detection
Google DeepMind 出的 DetectorScope,判文章是不是 AI 写的之外还会告诉你依据在哪几句话,比只给个分数的老检测器好用。
Interpretability here does not cost accuracy — on out-of-distribution text the transparent version actually beat the black box by 17 F1 points. Teams flagging student essays or peer reviews can audit which cues drive verdicts and remove ones they consider unfair, such as styles correlated with non-native writing. The method also offers a template for making other safety classifiers inspectable.
检测AI文本的论文有个老矛盾:准的不透明,透明的欠准。DeepMind和UPenn用SAE把检测特征翻译成人话,还顺手把两者都赢了,代码已放出。
a16z 的 Alex Danco 聊为什么大家爱标“这是 AI 写的”,还扯上 1960 年代法国理论和伏尔泰,角度挺新鲜。
想查一段文字是不是AI写的?这个检测器能看到词级线索,准确率97%以上,还公开代码和数据集,可自己跑。
这篇论文告诉你,现在AI检测器遇到‘人类写、AI改’就失灵,直接生成能抓到九成,改写后只剩三成,做防御的得看看。
Pangram 4检测AI文本几乎不犯错,24000篇才误报一次,还能识破伪装工具,适合内容审核场景。
这篇论文用SenFlow模型做混合人机文本检测,在MOSAIC基准上比现有方法高出4个多点的F1分数,还发现AI句子有长度特征。
做 AI 文本检测研究的团队终于有了一个能模拟真实渐进编辑过程的基准——它揭示了混合作者文本比纯 AI 文本更难检测的反直觉现象,值得点开看看实验设计。
AI文本检测的可解释性和鲁棒性一直是痛点,READER用1.5B参数就超越了千倍大模型,做内容安全或反作弊的团队值得关注这个新思路。
这项研究戳破了AI文本检测的底层假设——检测器可能只是在放大预训练模型的偏见而非真正学习区分。做AI安全、内容审核或学术诚信检测的团队,看完会重新评估现有检测方案的有效性。