Tag · 2 篇
交错图文生成
分布 数据集与评测1视觉语言模型1
01 02
多模态奖励基准 2:评估面向交错图文的全能奖励模型
Multimodal RewardBench 2: Evaluating Omni Reward Models for Interleaved Text and Image
为视觉生成模型(文生图、图像编辑、交错生成)提供了首个统一的奖励模型评测基准,可直接用于评估和选择生成模型的偏好对齐信号,并揭示当前多模态奖励模型与人类判断的差距。
DuoGen:迈向自主交错多模态生成
DuoGen: Towards Autonomous Interleaved Multimodal Generation
用预训练 MLLM 做视觉理解、用视频预训练 DiT 做图像生成,再以两阶段解耦对齐把两者拼成交错图文生成器,为视觉研究者提供了免单模态预训练即可搭建统一生成模型的可行路径,以及交错图文评测基准。