对抗性偏好

一种让草稿模型在关键决策点刻意偏离目标模型的训练目标，通过触发验证拒绝与重采样，使关键token由目标模型在低噪声条件下重新生成