Tag · 4 篇
参考图像引导
选择性地提取视觉属性并注入文本到图像模型
Selectively Extracting and Injecting Visual Attributes into Text-to-Image Models
通过优化单个文本词元并引入蒸馏/残差双嵌入,把参考图中的形状、材质、姿态、镜头角度等属性解耦后注入 T2I 生成,可作为无需微调模型即可实现属性级可控生成的即插即用手段。
基于参考引导深度压缩变分自编码器的实时可流式说话人肖像视频生成
Real-Time Generation of Streamable Talking Portrait Video with Reference-Guided Deep Compression VAEs
因果视频 VAE 将可变数量的参考图像作为引导,把静态外观信息从潜变量中剥离,使网络专注动态信息,这一思路可直接迁移到任何需要深度潜空间压缩的流式视频生成任务;块级自回归的 Rectified Flow Transformer 也为实时长视频生成提供了可复用的采样架构。
OrionEdit:连接参考图像与源图像以实现泛化的跨图像编辑
OrionEdit: Bridging Reference and Source Images for Generalized Cross-Image Editing
把「参考图→源图」的跨图像编辑形式化为可控生成任务,并用对称正交子空间解耦加反向因果注意力掩码约束潜变量单向依赖,这套解耦与信息流掩码思路可直接迁移到多条件控制、个性化生成与风格迁移中,用来抑制参考信息泄漏到不该改的区域。
EasyV2V:一个高质量的基于指令的视频编辑框架
EasyV2V: A High-quality Instruction-based Video Editing Framework
论文表明预训练文生视频模型本身具备编辑能力,仅需简单的序列拼接条件与轻量低秩适配微调即可训练强编辑模型,并统一掩码机制实现时空控制,为视频编辑提供可复用的简洁设计范式。