Tag · 2 篇
多模态虚假信息检测
01 02
面向多模态虚假信息检测的概率概念图推理
Probabilistic Concept Graph Reasoning for Multimodal Misinformation Detection
把多模态虚假信息检测重构为「概念图构建 + 图上的层次化注意力推理」,并用 MLLM 自动发现与验证高层概念节点,这条「先建图后推理」的范式可迁移到需要可解释证据链的图文一致性判断任务(如图文匹配、事实核查、caption 幻觉检测)。
连接像素与词:面向多模态媒体验证的掩码感知局部语义融合
Bridging Pixels and Words: Mask-Aware Local Semantic Fusion for Multimodal Media Verification
把掩码-标签对作为视觉与文本之间的细粒度对齐单元,并用双向查询机制检测局部语义冲突,这一思路可直接迁移到需要像素级视觉定位的跨模态任务(如指代分割、开放词表定位、图文检索中的局部匹配)。