Tag · 1 篇
Explaining CLIP Zero-shot Predictions Through Concepts
把 CLIP 的图像-文本联合嵌入投影到由语言描述学到的概念空间,用对齐+重建目标训练,可在不改 CLIP 权重、不加概念监督的前提下为开放词表零样本预测给出概念级解释;做 VLM 可解释性或概念瓶颈方向可直接复用该投影与训练目标。