Tag · 1 篇
Cross-modal Identity Mapping: Minimizing Information Loss in Modality Conversion via Reinforcement Learning
提出用图文检索相似度作为强化学习奖励信号,无需人工标注即可优化LVLM的图像描述,减少模态转换中的信息损失;该奖励设计可迁移到其他需要细粒度视觉理解的生成任务。