OpenAI 发布药用化学评测基准,含 99 道题
OpenAI unveils benchmark to test AI on medicinal chemistry
OpenAI 搞了个药用化学基准,99 道题全部出自 117 篇论文和专利,能直接测模型在药物设计这类化学任务上到底行不行。做制药或化学相关 AI 应用的开发者可以拿来对比各家模型。
OpenAI 发布了一个用于测试 AI 在药用化学领域能力的基准。该基准包含 99 道题目,题目内容取自 117 篇论文与专利,用于衡量模型在真实药用化学任务上的表现。
这 99 个问题覆盖药物设计与化学分析等药用化学场景,出题依据全部来自已发表论文和专利,说明其评测内容有明确的文献来源,而非凭空构造的题目。通过这类基准,研究者可以对比不同模型在化学专业任务上的强弱项。
目前各大实验室的通用基准多集中在编程与数学等领域,针对药用化学这类垂直学科的公开评测较少。OpenAI 此举为化学、制药方向的开发者提供了一个可量化的评测工具,方便判断哪些模型适合用于药物研发相关的工作流。
OpenAI unveils benchmark to test AI on medicinal chemistry
The benchmark's 99 problems draw on 117 papers and patents.
This report is categorized under AITOP's "Products" desk, focusing on US frontier AI labs and Silicon Valley technology leaders. Within our cross-regional analytical framework, it directly maps to AI developer toolchains, coding agents, and engineering workflows and US-China foundation model benchmarks and commercialization comparison. Key entities and technical topics under continuous tracking include OpenAI, benchmarks, drug discovery.
Source attribution: curated from Tech in Asia (@Grace Priscilla Teo).