08:55Fireworks AI@FireworksAI_HQ精选Fireworks 宣布对 NVIDIA Nemotron 3 的强化学习微调功能上线,首批支持 Nemotron 3 Super 的 LoRA 微调。训练采用 GRPO 算法,可在一处平台完成训练和部署。计费方式改为按 GPU 小时而非按 token,解决了长多轮对话成本不可控的问题。AI产品Nemotron 3Fireworks微调RL训练GRPO6 个信源在谈推荐理由:Fireworks 刚上线了 Nemotron 3 的 RL 微调,按 GPU 小时计费不怕长对话烧钱,用 GRPO 训练一条龙搞定。原文
23:54elvis@omarsar0精选论文提出三阶段流水线,从GUI轨迹中分段、聚类候选技能并训练技能感知策略。八个聚类中五个纯度≥0.95。但GRPO仅将技能步准确率从18.5%提升至20.5%,低于频率先验。作者指出弱边界检测器、无序段表示和离线奖励模型是三大原因。论文SKILL.mdCodexOpenAI智能体GRPO10 个信源在谈推荐理由:这篇论文用OpenAI Codex的思路做智能体技能提取,八个聚类五个纯度超0.95,但GRPO只提了2个点,分析很实在。原文
21:49向阳乔木@vista8本文用简洁的图示对比了三种主流大语言模型后训练技术:SFT(监督微调)让模型学会遵循指令;DPO(直接偏好优化)使输出更符合人类偏好;GRPO(群体相对策略优化)进一步激发模型的推理和思考能力。三者在训练目标和方法上层层递进,是当前LLM对齐和增强推理能力的关键技术路径。对于想了解模型训练流程或优化模型输出的开发者,这是一份直观的入门参考。AI模型LLM后训练SFTDPOGRPO推荐理由:想搞懂LLM后训练技术栈的开发者,这张图帮你三分钟理清SFT、DPO、GRPO的关系和演进逻辑,建议收藏。原文