Tag · 4 篇

在线强化学习

分布 生成模型与扩散3强化学习与具身智能1
01
生成模型与扩散 / CVPR2026

Style-GRPO:由奖励建模引导的语义感知图像风格迁移偏好优化

Style-GRPO: Semantic-Aware Preference Optimization for Image Style Transfer Guided by Reward Modeling

提供了一套可复用的「奖励模型 + 在线 RL」范式:先构建 8 万级空间关系偏好对训练 SpatialScore 奖励模型,再用其驱动 GRPO 式在线强化学习提升扩散模型的空间关系生成能力,可直接迁移到其他需要精确空间布局的可控生成任务。

奖励模型在线强化学习偏好优化
02
强化学习与具身智能 / CVPR2026

OctoNav:迈向通用具身导航

OctoNav: Towards Generalist Embodied Navigation

把 MLLM 改造成仅凭 2D 视觉观测输出低层动作的 VLA 模型,并用 TBA-CoT 数据加 GRPO 做「先思考后行动」的强化学习训练,为视觉研究者提供了将推理链注入具身导航策略的可复用范式。

视觉语言动作模型导航基准思维链
03
生成模型与扩散 / CVPR2026

ID-Crafter:面向组合式多主体视频生成的视觉语言模型接地在线强化学习

ID-Crafter: VLM-Grounded Online RL for Compositional Multi-Subject Video Generation

分层身份保持注意力(intra-subject/inter-subject/cross-modal 三级聚合)与 VLM 语义引导、在线 RL 微调的组合,可直接迁移到个性化视频生成与多主体可控生成中,解决多主体身份混淆与语义冲突问题。

多主体视频生成身份保持在线强化学习
04
生成模型与扩散 / CVPR2026

通过奖励建模增强图像生成中的空间理解

Enhancing Spatial Understanding in Image Generation via Reward Modeling

用奖励模型为文生图的空间关系正确性提供可微/可打分信号,可直接接入在线 RL(如 GRPO/PPO 类)微调扩散或自回归生成器,解决复杂空间提示词需多次采样的问题;SpatialScore 也可作为空间一致性的自动评测器复用。

奖励模型在线强化学习空间关系生成