主要来源@koltregaskes
查看原文事件专题 ·多源确认
OpenAI通过软件优化将推理成本减半
OpenAI近期通过纯软件优化将推理成本降低了约50%,工程师利用更好的批处理和KV-cache管理提升了GPU利用率。该优化已部署到ChatGPT的登录用户流量中,GPU需求降至仅数百块。部分人猜测这是通过量化实现,并可能关联到近期ChatGPT质量下降的投诉。
当前结论
OpenAI没换硬件,靠软件就把推理成本砍了一半。这对模型成本和用户体验可能都有影响,值得了解。
11 个信源79° AI 热度最后更新 2026/7/1 21:48:38
证据链
11 个信源冲突核查
现有去重数据只说明这些来源讨论同一事件,不代表立场相同。当前没有结构化的支持或反驳证据,不自动推断冲突。