Tag · 2 篇
手物交互生成
01 02
PAM:面向仿真到现实手物交互视频生成的姿态-外观-运动引擎
PAM: A Pose-Appearance-Motion Engine for Sim-to-Real HOI Video Generation
把手物交互的位姿、外观、运动统一进一个可控视频生成引擎,并用生成视频作为合成数据反哺下游手部姿态估计,为视觉研究者提供了「生成即数据增强」的闭环范式,以及深度/分割/关键点多条件输入的具体消融结论。
基于结构与接触感知表征的开放世界手物交互视频生成
Open-world Hand-Object Interaction Video Generation Based on Structure and Contact-aware Representation
提出一种无需3D标注的结构与接触感知表征(手物接触、遮挡、整体结构上下文),可作为辅助监督信号嵌入视频生成模型,并用共享-特化联合生成范式同时生成表征与视频;对做可控/物理真实视频生成的人,这是一个可复用的表征监督与联合训练思路。