【强化学习】从策略梯度到PPO再到GRPO 【2026-03-22】从策略梯度(Policy Gradient,PG)到近端策略优化(Proximal Policy Optimization, PPO),再到群组相对策略优化(Group Relative Policy Optimization, GRPO)的逐步介绍。