Tag · 2 篇
结构化表示
分布 生成模型与扩散1视觉语言模型1
01 02
基于标记表示的统一矢量户型图生成
Unified Vector Floorplan Generation via Markup Representation
把户型图编码成结构化标记语言后统一为下一词元预测,这种「用单一序列语法统一异构条件」的思路可迁移到布局生成、场景图到图像等需要多条件输入的可控生成任务。
不要展示像素,展示线索:通过感知程序解锁语言模型中的视觉工具推理
Don't Show Pixels, Show Cues: Unlocking Visual Tool Reasoning in Language Models via Perception Programs
提出将视觉工具输出(如深度、光流、对应关系)重写为紧凑、结构化的语言原生摘要,使多模态大模型能直接解析和推理,从而在BLINK等感知任务上大幅提升性能,为视觉-语言模型中的工具使用提供了免训练、模型无关的新范式。