GRPO 的核心特点是对同一个输入生成一组候选输出，用这组输出的相对优劣计算优势值，不需要像 PPO 那样训练独立的 critic/value 网络。