DeepSeekMath / GRPO：DeepSeekMath: Pushing the Limits of Mathematical Reasoning

arXiv · DeepSeek

提出 GRPO：用同组多个回答的平均奖励作基线，去掉价值网络，大幅降低 RL 的显存与复杂度。