跨模态

语言在跨域少样本视觉特征增强中至关重要

Language Does Matter for Cross-Domain Few-Shot Visual Feature Enhancement

该论文提出用图像描述模型和LLM分别提取图像级与域级语言属性，并通过轻量残差交叉注意力将语言描述嵌入视觉特征，以增强跨域少样本场景下的视觉特征泛化能力。这一思路可复用于任何需要提升预训练视觉特征跨域迁移性的视觉任务，如分类、分割和检测。