Tag · 3 篇
图像裁剪
分布 视觉语言模型2图像编辑与可控生成1
01 02 03
Venus:面向美学指导与裁剪的多模态大语言模型基准构建与能力增强
Venus: Benchmarking and Empowering Multimodal Large Language Models for Aesthetic Guidance and Cropping
把「美学指导」定义为一个可评测的 MLLM 能力,并用两阶段(渐进式美学问答 + CoT 理由)微调把该能力迁移到裁剪重构图任务上,可作为条件化生成/编辑中「可解释美学先验」的可复用范式。
PhotoFramer:多模态图像构图指令
PhotoFramer: Multi-modal Image Composition Instruction
把「构图指导」建模为文本指令加示例图的双输出任务,并给出用多视角数据加退化模型合成「构图差—构图好」配对的可复用数据构造流程,可直接迁移到其他需要成对编辑监督的图像生成任务。
学会聚焦与精确裁剪:面向多模态大语言模型的信息差与视觉定位损失强化学习框架
Learning to Focus and Precise Cropping:A Reinforcement Learning Framework with Information Gaps and Grounding Loss for MLLMs
针对多模态大模型在裁剪区域上「看了却没用」的问题,用信息差机制(降低全局图粒度以制造信息增益)配合少量边界框的 grounding loss 做两阶段强化学习,可复用于任何需要模型真正依赖局部细节的高分辨率 VQA / 细粒度感知流程。