AITP
精选全部 AI 动态AI 日报Agent 接入关于更新日志信源提报反馈
登录 / 注册
AITOP

M3Bench

共 1 条相关 AI 资讯
7月7日
11:08
11:08官方账号arXiv cs.AI@Guli Zhu, Chenwei Wu, Liyue Shen
论文提出M3Bench基准,专用于评估医学视觉语言模型(VLM)的模型编辑效果。M3Bench包含16,276个问题,覆盖多种解剖结构、模态和专科,支持单次和顺序编辑。研究者评估了4种代表性编辑器在6个医学和通用VLM上的表现,发现梯度方法迁移强但破坏局部性,记忆方法局部性好但缺乏组合泛化。该基准揭示了VLM潜在空间几何与编辑方法失效的关系,为安全部署提供指导。
论文M3Bench医学VLM模型编辑多模态AI安全

推荐理由:这篇论文搞了个医学VLM模型编辑的测试基准M3Bench,有1.6万多个问题,测了6个模型和4种编辑方法,发现各有各的坑,想搞懂模型编辑在医学领域行不行得通可以看。
原文
精选全部日报登录