Tag · 4 篇

参考图像引导

分布 图像编辑与可控生成3生成模型与扩散1
01
图像编辑与可控生成 / CVPR2026

选择性地提取视觉属性并注入文本到图像模型

Selectively Extracting and Injecting Visual Attributes into Text-to-Image Models

通过优化单个文本词元并引入蒸馏/残差双嵌入,把参考图中的形状、材质、姿态、镜头角度等属性解耦后注入 T2I 生成,可作为无需微调模型即可实现属性级可控生成的即插即用手段。

文本到图像生成属性解耦词元优化
02
生成模型与扩散 / CVPR2026

基于参考引导深度压缩变分自编码器的实时可流式说话人肖像视频生成

Real-Time Generation of Streamable Talking Portrait Video with Reference-Guided Deep Compression VAEs

因果视频 VAE 将可变数量的参考图像作为引导,把静态外观信息从潜变量中剥离,使网络专注动态信息,这一思路可直接迁移到任何需要深度潜空间压缩的流式视频生成任务;块级自回归的 Rectified Flow Transformer 也为实时长视频生成提供了可复用的采样架构。

视频扩散模型因果视频-VAE自回归生成
03
图像编辑与可控生成 / CVPR2026

OrionEdit:连接参考图像与源图像以实现泛化的跨图像编辑

OrionEdit: Bridging Reference and Source Images for Generalized Cross-Image Editing

把「参考图→源图」的跨图像编辑形式化为可控生成任务,并用对称正交子空间解耦加反向因果注意力掩码约束潜变量单向依赖,这套解耦与信息流掩码思路可直接迁移到多条件控制、个性化生成与风格迁移中,用来抑制参考信息泄漏到不该改的区域。

扩散模型参考图像引导零样本编辑
04
图像编辑与可控生成 / CVPR2026

EasyV2V:一个高质量的基于指令的视频编辑框架

EasyV2V: A High-quality Instruction-based Video Editing Framework

论文表明预训练文生视频模型本身具备编辑能力,仅需简单的序列拼接条件与轻量低秩适配微调即可训练强编辑模型,并统一掩码机制实现时空控制,为视频编辑提供可复用的简洁设计范式。

指令编辑视频编辑低秩适配