DAPO:DAPO: An Open-Source LLM Reinforcement Learning System at Scale

arXiv · 字节 Seed / 清华

针对 GRPO 在长 CoT 训练中的熵坍缩、无效样本和长度偏差问题,提出四项改进并完全开源。

arXiv:2503.14476