04:13OpenAI@OpenAIOpenAI 在推文中介绍其模拟部署方法可将评估意识降低至接近真实生产流量水平。该方法扩展至带状态工具的智能体部署,表明工具模拟器在给定充分上下文和能力时能够生成逼真的轨迹。这有助于更准确地评估模型在真实场景中的表现。论文OpenAI模拟部署智能体评估意识工具模拟器10 个信源在谈推荐理由:OpenAI 分享了模拟部署的技术细节,能大幅降低评估误差,对研究模型评估和智能体部署的人很有参考价值。原文
04:13OpenAI@OpenAI精选OpenAI提出一种新研究方法,通过模拟部署使用近期去标识化用户请求(涉及23,341次浏览)来预测模型行为。该方法在发布前评估候选模型响应,相关推文获得44条评论、27次转发和375个赞。研究旨在减少模型在实际使用中的意外行为。论文OpenAI模拟部署模型安全行为预测2 个信源在谈推荐理由:OpenAI搞了个新方法,用真实用户请求模拟部署,提前预测模型行为,比直接上线更稳妥。原文