Firecrawl

Firecrawl 是一款面向 AI 智能体的网页抓取工具，近期发展迅速，已累计抓取 80 亿网页（berryxia），并在 Devtool Arena 智能搜索排名中位居第一（Firecrawl）。其主要进展包括：推出实验性 Forward Deployed Agent Prometheus，用于动态网页数据采集（Firecrawl）；上线 Agent 注册服务，支持 Codex、Claude Code 等智能体无缝接入（Firecrawl）；发布 /monitor 功能，允许用户通过自然语言监控网页变化，据称可节省 90% 的 token 消耗（berryxia）。此外，Firecrawl 还参与推动了智能体网络注册开放协议 auth.md（Firecrawl），显示出其在 AI 智能体基础设施标准化上的野心。当前焦点在于 Firecrawl 如何平衡高效抓取与合规性，并应对日益增长的 AI 智能体对实时、结构化网页数据的需求。未来值得观察其 Agent 生态能否形成网络效应，以及是否会被大型云服务商或数据平台挤压生存空间。