Direct Nash Optimization

一种大模型对齐方法，将偏好对齐建模为两人博弈并迭代逼近纳什均衡，实用变体DNO-Prct采用在线采样、LLM评分、筛选偏好对和DPO更新的闭环流程。