生成模型与扩散 / CVPR2026
PaCo-RL:以成对奖励建模推进一致性图像生成的强化学习
PaCo-RL: Advancing Reinforcement Learning for Consistent Image Generation with Pairwise Reward Modeling
把成对一致性奖励模型与 GRPO 结合,用无标注数据对生成模型做 RL 微调,并给出分辨率解耦的优化策略来降低 RL 训练成本;做多图一致性生成或想把主观视觉偏好转成奖励信号的工作可直接复用这套奖励建模与多奖励聚合思路。
强化学习微调奖励模型成对偏好建模