自监督与表征学习 / CVPR2026
以文本语义增强视觉表征:文本语义驱动的原型用于异构联邦学习
Enhancing Visual Representation with Textual Semantics: Textual Semantics-Powered Prototypes for Heterogeneous Federated Learning
用大语言模型生成的类文本描述经预训练语言模型编码成语义原型,再通过可训练提示与客户端图像特征对齐,为视觉表征学习提供了一种跨模态语义先验注入手段,可迁移到长尾/异构数据下的分类表征对齐。
联邦学习原型学习视觉语言对齐