生成模型与扩散 / CVPR2026
Neighbor GRPO:对比式常微分方程策略优化对齐流模型
Neighbor GRPO: Contrastive ODE Policy Optimization Aligns Flow Models
对做扩散/流匹配模型偏好对齐的人,这篇给出了绕开 SDE 的 GRPO 方案:直接扰动 ODE 初始噪声构造候选轨迹,用基于距离的 softmax 代理目标做策略梯度,从而保留确定性采样与高阶求解器的少步采样优势,可直接替换现有 SDE-GRPO 训练流程。
流匹配强化学习对齐GRPO