09:32官方账号arXiv cs.AI@Jason Armitage, Ioannis Tsochantaridis, Linda Mazzone, Chuqiao Yan, Srini Narayanan, Sarah EblingMAP是首个评估多模态AI系统辅助无障碍需求用户规划实地访问的基准。该基准包含两项新颖评估:无障碍规划主张验证,评估系统对场所信息和无障碍功能信息的支持能力;无障碍规划视觉证据检索,检查系统能否为请求的场所和无障碍功能选择视觉证据。MAP采用自动评分和部分人工评分相结合的方法,支持在场所信息和无障碍信息随时间变化的环境下比较AI系统性能。论文MAP多模态无障碍规划推荐理由:MAP基准测试首次评估AI系统如何帮助有无障碍需求的用户规划实地访问,包含主张验证和视觉证据检索两项创新评估。原文稍后读已读值得跟进有用关注 MAP