视觉语言模型 / CVPR2026
以反事实对抗幻觉:扩散引导扰动用于抑制 LVLM 幻觉
Fighting Hallucinations with Counterfactuals: Diffusion-Guided Perturbations for LVLM Hallucination Suppression
用扩散模型编辑图像构造反事实样本,提取视觉诱发幻觉的低秩表征子空间,并在推理时把中间隐状态投影出该子空间——这套「反事实扰动+子空间投影」的免训练流程可直接迁移到其他多模态模型的忠实性修正与表征编辑研究。
幻觉抑制反事实样本扩散编辑