#agentic任务

训练混合架构模型的朋友看看这篇：加了限制注意力访问历史的辅助损失后，长上下文任务提升明显，方法可直接套用。