Tag · 8 篇
4D-重建
Vista4D:基于 4D 点云的视频重拍摄
Vista4D: Video Reshooting with 4D Point Clouds
把输入视频与目标相机统一锚定在 4D 点云表示上,用静态像素分割 + 4D 重建显式保留已见内容并提供稠密相机信号,再用重建的多视角动态数据训练以抵抗真实点云伪影——这套「4D 点云作为中间表示 + 合成数据增强鲁棒性」的思路可直接迁移到新视角合成、动态场景编辑与视频重渲染任务。
TROPHIES:从多视角视频中时序重建场所、人体与相机
TROPHIES: Temporal Reconstruction of Places, Humans, and Cameras from Multi-view Videos
把动态人体、静态场景与相机位姿放进同一全局坐标系联合优化,并用尺度一致性、接触先验与跨视角时序一致性做耦合,可直接借鉴到多视角/自我中心视频下的 4D 场景重建与人体-场景交互建模。
SharpTimeGS:通过生命周期调制实现清晰稳定的动态高斯泼溅
SharpTimeGS: Sharp and Stable Dynamic Gaussian Splatting via Lifespan Modulation
提出可学习的生命周期参数,将高斯的时序可见性从高斯衰减改为平顶分布,并据此调制运动幅度与致密化策略,为动态高斯泼溅中静态与动态区域的解耦优化提供了可复用的技术手段。
RHINO:从单目视频重建人与新物体的交互
RHINO: Reconstructing Human Interactions with Novel Objects from Monocular Videos
用 3D-aware 基础模型为低纹理区域提供稳定 SfM 线索,再把表观运动分解为相机运动与物体运动,从而在统一世界坐标系下联合配准人、物体与场景;其带符号距离场组合式神经场与可微接触先验可直接复用于人-物交互重建与物理合理性约束。
MotionCrafter:基于 4D 变分自编码器的稠密几何与运动重建
MotionCrafter: Dense Geometry and Motion Reconstruction with a 4D VAE
把稠密 3D 点图与 3D 场景流放进同一坐标系联合表示,并训练专用 4D VAE 来承载扩散先验,可直接复用到单目视频的 4D 重建与稠密运动估计;其「不必强行对齐 RGB VAE 潜空间、改用数据归一化与训练策略」的结论,对任何想把视频生成先验迁移到几何/运动回归任务的工作都是可借鉴的设计经验。
MSCD-GS:基于高斯泼溅的运动分离协同去模糊动态重建
MSCD-GS: Motion-Separated Cooperative Deblurring Dynamic Reconstruction via Gaussian Splatting
把曝光时间内的相机与物体运动分别建模为静态/动态高斯各自的运动模型,并用运动感知网络合成虚拟模糊图与去模糊网络结果协同监督,可直接迁移到任何用高斯泼溅做动态场景重建时处理运动模糊输入的流程。
Faster-GS:分析与改进高斯泼溅优化
Faster-GS: Analyzing and Improving Gaussian Splatting Optimization
对做 3DGS/4D 重建的人,这篇把分散的加速技巧统一成一套可复现的优化配方,并给出数值稳定性、高斯截断与梯度近似的处理细节,可直接作为训练 3DGS 时的低成本基线替换默认实现。
基于物理信息神经场的动态黑洞发射断层成像
Dynamic Black-hole Emission Tomography with Physics-informed Neural Fields
将可微分神经渲染与物理约束(速度场作为发射率动力学的软约束)结合,用于从稀疏单视角测量中重建动态 3D 场,这种联合优化 4D 发射率与 3D 速度场的思路可迁移到其他病态动态重建问题(如流体、动态 NeRF)。