Tag · 1 篇
Mitigating Multimodal Hallucinations via Gradient-based Self-Reflection
用一阶泰勒梯度估计每个视觉 token 与文本 token 对当前输出的贡献,从而在解码时抑制虚假视觉特征并重新平衡跨模态贡献;这是一种无需训练、无需辅助模型的推理期去幻觉手段,可直接套用到任意 MLLM 的解码环节。