07:09
elvis@omarsar0
elvis@omarsar0精选
推荐理由：想知道数据智能体怎么选？DataSpace测了6个模型和5个框架，换框架能让准确率差15个点，值得看。
DataSpace
共 1 条相关 AI 资讯
8月6日
07:09
新研究发布DataSpace基准，用于评估数据智能体在异构数据工作区生成可验证表格结果的能力。该基准包含410个跨语言任务，覆盖7439个工件，总数据量15.01GB，涉及CSV、JSON、SQLite、Markdown、PDF和视频等格式。在六个前沿多模态模型和五个常用智能体框架的测试中，最佳准确率为66.34%。固定模型主干时，更换框架可使准确率变动15.36个百分点。多模态证据整合和连接操作在六个骨干模型上均降低了准确率。