生成模型与扩散 / CVPR2026
FoleyDirector:通过结构化脚本实现视频到音频生成的细粒度时序引导
FoleyDirector: Fine-Grained Temporal Steering for Video-to-Audio Generation via Structured Scripts
FoleyDirector 在 DiT 架构上通过结构化时序脚本和时序脚本注意力实现细粒度时序控制,为视觉研究者提供了一种可复用的时序条件注入机制,尤其适用于多事件或视觉线索不足(如小区域、画外音、遮挡)的视频到音频生成场景。
视频到音频生成扩散-Transformer时序控制