DNO-Prct采用迭代式流程：每一轮在策略模型上做在线采样，由LLM对样本和教师模型的黄金回答一起打分，筛选出大间隔的偏好对，最后执行DPO风格的对比更新。