Tag · 2 篇
数据集与基准
分布 视觉语言模型1生成模型与扩散1
01 02
你看到我指向哪里了吗?基于手势的第一人称视频问答
Do You See What I Am Pointing At? Gesture-Based Egocentric Video Question Answering
将3D手部关键点编码为离散token并与视频帧交错输入MLLM,为第一人称视频中的指向意图理解提供了可复用的空间-时序上下文注入方式;同时发布的EgoPointVQA数据集可用于评测模型的手势定位与指代推理能力。
ConsID-Gen:视角一致且身份保持的图像到视频生成
ConsID-Gen: View-Consistent and Identity-Preserving Image-to-Video Generation
用无位姿辅助视角增强首帧、经双流视觉-几何编码器与文本-视觉连接器融合语义与结构线索,为 Diffusion Transformer 提供统一条件,可直接借鉴到任何需要多视角一致性的条件视频生成任务中。