Tag · 2 篇
扩散模型后训练
分布 生成模型与扩散1图像编辑与可控生成1
01 02
用内在自置信度奖励改进文本到图像生成
Improving Text-to-Image Generation with Intrinsic Self-Confidence Rewards
用模型自身对加噪潜变量的重建误差构造内在奖励,替代外部奖励模型做强化学习后训练,可直接迁移到扩散/流匹配模型的偏好对齐与组合生成能力提升,并可与外部奖励组合以缓解奖励黑客。
HP-Edit:面向图像编辑的人类偏好后训练框架
HP-Edit: A Human-Preference Post-Training Framework for Image Editing
用预训练 VLM 加少量人工偏好打分训练自动评分器,再把它同时当作偏好数据构造器和 RL 奖励函数,为扩散/流式图像编辑模型做后训练对齐;这套「VLM 评分器 + 偏好奖励」的流程可直接迁移到超分、去噪、视频生成等任何缺少可微目标的视觉生成任务。