模型初始化

FINE：分解知识以实现可变尺寸扩散模型的初始化

FINE: Factorizing Knowledge for Initialization of Variable-sized Diffusion Models

把扩散模型每层权重分解为跨层共享的尺寸无关因子 U、V 与层专属的 Σ，从而在只有小模型预训练权重时直接重组初始化任意尺寸的扩散模型，仅需少量数据重训 Σ；对需要在显存受限场景下部署不同规模扩散模型的视觉研究者提供了可复用的权重分解与初始化思路。