11:19
官方账号arXiv cs.AI@Boyang Zhang, Adrian Lyjak, Eli Stewart, Zhaoqi Li, Simon Suo
推荐理由：Llamaindex出的ExtractBench基准测文档提取。商业VLM长文档会截断，LlamaExtract Agentic Plus更准还更便宜。
ExtractBench
共 1 条相关 AI 资讯
8月3日
11:19
ExtractBench是一个面向模式引导文档提取的新基准，评估集涵盖370份企业文档、4869页、8个业务领域和67种文档类型。该基准同时评测值准确性、记录完整性、来源可追溯性和成本，其中值F1对顺序不敏感。测试发现，商业VLM在短文档上表现良好，但在长文档上常截断记录列表；编码智能体准确率更高但成本明显更高。LlamaExtract Agentic Plus在三个指标上均排第一，成本仅为编码智能体的很小一部分。