股票中原内配 DeepSeek关键RL算法GRPO,有人从头跑通了,贡献完整代码
2025-04-29选自GitHub股票中原内配 作者:Andriy Burkov GRPO(Group Relative Policy Optimization)是 DeepSeek-R1 成功的基础技术之一,我们之前也多次报道过该技术,比如《DeepSeek 用的 GRPO 占用大量内存?有人给出了些破解方法》。 简单来说,GRPO 算法丢弃了 critic model,放弃了价值函数近似,转而通过组内样本的相对比较来计算策略梯度,从而有效降低了训练的不稳定性,同时提高了学习效率。 既然 GRPO 如此有效,