Tag · 2 篇
多粒度标注
分布 数据集与评测1视觉语言模型1
01 02
RealVLG-R1:面向机器人感知与操作的大规模真实世界视觉-语言定位基准
RealVLG-R1: A Large-Scale Real-World Visual-Language Grounding Benchmark for Robotic Perception and Manipulation
该工作提供了带边界框、分割掩码、抓取位姿与接触点统一标注的大规模真实场景视觉-语言定位数据集,并用强化微调让 VLM 在统一输出头下同时预测定位与抓取参数,可作为语言驱动操作与开放词表定位的联合评测基准。
InstAP:面向时空理解的实例感知视觉-语言预训练
InstAP: Instance-Aware Vision-Language Pre-Train for Spatial-Temporal Understanding
提出实例级对比对齐目标,将文本提及定位到时空区域,可复用于需要细粒度视觉-语言对齐的任务(如指代分割、视频实例检索),并证明实例级预训练能提升全局零样本视频理解。