Perplexity:沙盒内用 grep 检索财务文档,准确率 0.627 超语义搜索
Perplexity 分享了个实用思路:让智能体在沙盒里用 grep 直接翻财务文档,内部测试准确率 0.627,比语义搜索的 0.37 高出一大截。
Perplexity 介绍了一种财务文档问答方法:每个沙盒里放一份真实的代码检出(checkout),智能体用 grep 等标准文件工具直接检索,而不是依赖宽泛的语义搜索。在包含 150 个财务文档问题的内部基准上,这种方法达到 0.627 的答案准确率,语义搜索约为 0.37,差距接近一倍。
Because each sandbox holds a real checkout, agents search it with grep and standard file tools instead of relying on broad semantic searches. On an internal benchmark of 150 financial-document questions, this reached 0.627 answer accuracy versus about 0.37 for semantic search. 💬 1 🔄 0 ❤️ 5 👀 2223 📊 1 ⚡