10:40arXiv cs.LG@Nicklas Hansen, Xiaolong Wang该论文发现世界模型的幻觉集中在状态-动作空间的低覆盖区域,并提出轻量级数据驱动信号可检测和缓解。研究者发布了MMBench2数据集(427小时、210个任务),并训练了350M参数的世界模型。他们识别了三种幻觉模式(感知、动作边缘化、场景发散),开发了三个预测信号。覆盖率感知采样和基于好奇心的在线数据收集方法使得仅需50条真实轨迹即可微调模型适应全新环境。论文MMBench2世界模型幻觉数据覆盖OpenAI3 个信源在谈推荐理由:这篇论文用具体数据和实验证明世界模型的幻觉本质是数据覆盖问题,还给出了实用的检测和缓解方法。原文
10:41arXiv cs.LG@Miso Choi, Seonga Choi, Mincheol Kwon, Woosung Joung, Jinkyu Kim, Jungbeom Lee论文发现,在Vicuna、Qwen2.5、LLaMA2和Mistral等模型家族中,上下文的真实性评分(Truth Scores)在指令微调或多模态适配后高度保留,与其注意头权重继承一致。作者提出TruthProbe软门控策略,通过放大上下文真实头而保留其他头贡献,在HaluEval上提升上下文真实性,并在POPE和CHAIR上减少多模态幻觉。基础LLM的真实头评分有效传递给微调后的LLM和多模态LLM后代。代码已开源。论文TruthProbeVicunaQwen2.5多模态幻觉推荐理由:这篇论文挺有意思,发现模型家族里真实头会继承,搞了个TruthProbe来减少幻觉,效果不错,适合研究模型可解释性和幻觉问题的人看。原文
11:31arXiv cs.AI@Haeji Jung, Hila Gonen精选72°研究者推出 PhantomBench,这是首个专门评估语言模型对“不存在概念”识别能力的基准,包含超过6万个从真实领域衍生的虚构术语和实体。测试了21个不同规模和类型的模型,发现平均幻觉率高达86.7%,即使是前沿模型在面对预设存在的输入时也几乎无法拒绝回答。该基准可作为研究模型在罕见概念上幻觉行为的代理工具,并提供了可扩展的构建流程。这项工作揭示了模型知识边界认知的严重缺陷,对高风险应用场景构成警示。论文幻觉基准测试模型评估知识边界AI安全推荐理由:做AI安全或模型评估的团队,这个基准直接戳中了当前模型最致命的弱点——它们连“不存在的东西”都分不清,建议用PhantomBench测测自家模型。原文