#PICO

遇到难题所有 rollout 都失败时 GRPO 就学不到东西，这篇论文的 PICO 方法让专家轨迹能被策略兼容地利用，做 RL 训练的可以看看。