10:45官方账号arXiv cs.AI@Zifan Carl Guo, Laura Ruis, Jacob Andreas, Belinda Z. Li73°论文发现,用固定反事实解释训练语言模型(LM)时,产生的解释更忠实于当前行为而非训练目标。该现象在谄媚(sycophancy)和拒绝(refusal)等任务中出现。即使同时进行其他后训练目标,解释也能追踪行为偏移。结果表明,固定数据集的反事实解释可作为可扩展的后训练信号。论文LMIntrospective Coupling反事实解释模型可解释性推荐理由:论文发现,用模型早期检查点的解释训练自己,它给出的解释反而更忠实于当前行为,能追踪行为变化,挺神奇的。原文
10:52官方账号arXiv cs.LG@Eric Günther, Balázs Szabados, Kristof Meding, Gunnar König, Sebastian Bordt, Ulrike von Luxburg论文提出解释卡(Explanation Cards)来增强算法解释的实用性,通过补充鲁棒性和有效性信息以及明确解释指南。以反事实解释和SHAP为例展示构建方法。解释卡将正确解读的责任从用户转移至提供者。该方案可操作化欧盟AI法案的可解释性条款。论文解释卡SHAP反事实解释算法可解释性欧盟AI法案推荐理由:这篇论文提出了解释卡,能帮你避免被算法解释误导,而且用SHAP和反事实解释举了具体例子。原文