Latest

Every published item, in order · 88 items
5月25日
5月22日
5月19日
PapersUS vs ChinaMulti-sourceSelected76°12:55
Chinese contentDeep Research Agent 评测基准:管理咨询任务中 Claude、o3、Gemini 表现均不佳

管理咨询团队和依赖AI做深度分析的开发者会震惊——三个最先进的DRA在专家级任务中通过率不到22%,且各有致命短板。想避免被AI的自信输出误导,建议仔细看这篇评测的失败模式分析。

Event
arXiv: OpenAI@Tanmay Asthana et al. (3)11 sourcesSource
PapersUS vs ChinaMulti-sourceSelected10:26
Chinese contentMythos漏洞复现基准测试:GPT-5.5仅5/18成功

这个实验戳破了AI漏洞发现能力的泡沫——即使给定了目标文件,顶级模型复现已知漏洞的成功率也极低。做AI安全评估或漏洞研究的团队,看完会重新审视benchmark的可靠性。

Event
arXiv: Anthropic@Isaac David, Arthur Gervais11 sourcesSource
5月13日
5月12日