10:09
官方账号arXiv cs.AI@Gaetano Perrone, Simon Pietro Romano
推荐理由：这篇论文告诉你，现在AI检测器遇到‘人类写、AI改’就失灵，直接生成能抓到九成，改写后只剩三成，做防御的得看看。
ARB
共 1 条相关 AI 资讯
8月3日
10:09
ARB基准由1,800篇人类源文本构建，覆盖XSum、WritingPrompts和OpenWebText三个数据集，并使用Llama-3.2-3B、Qwen2.5-7B、Mistral-7B和Gemma-2-9B四个开源模型生成重写变体。在1%假阳性率下，FastDetectGPT和Binoculars-falcon-7b对直接生成文本的召回率分别为91.2%和93.5%，但对人类文本经LLM改写后的召回率骤降至30.8%和15.1%。RADAR同样从66.8%跌至12.2%，而BERT-Defense和RoBERTa-Defense在所有场景下召回率均低于3%。结果表明，传统基准上的检测性能无法迁移到LLM改写的人类文本场景。