11:14官方一手arXiv: DeepSeek@Ilia KarpovMafiaScope是一个开源测试平台,将社交推理游戏“黑手党”转化为测量机器理论心智的工具。在32场DeepSeek案例研究中,它收集了13815个结构化探针回答,发现智能体的置信度校准误差为0.17,且高估自己被怀疑的概率达1.5倍。该平台支持交互式可视化、反事实重放,并已发布200+跨模型游戏语料库。论文MafiaScopeDeepSeek社交推理推荐理由:想研究LLM在社交推理中的真实信念?MafiaScope用探针实验和反事实回放,让你看到智能体表面的伪装。DeepSeek案例数据很硬核。原文稍后读已读值得跟进有用关注 MafiaScope