Tag · 3 篇
模态缺失
分布 自动驾驶与遥感1医学影像与生物视觉1视频理解与时序1
01 02 03
连接异构协同感知中的模态隔离
Linking Modality Isolation in Heterogeneous Collaborative Perception
针对多智能体协同感知中「模态隔离」(不同模态智能体从未在同一帧共现)这一设定,用码本把各模态特征空间正则化为离散码空间,再学习跨模态 feature-code-feature 翻译实现无需空间重叠监督的对齐;做 V2X/多车协同感知、跨模态特征对齐或模态缺失鲁棒性的人可直接复用该「无共现对齐」思路与极低通信量的码传输方案。
面向鲁棒癌症风险估计的因子化上下文聚合:软重排序检索与分层锚框
Factorized Context Aggregation for Robust Cancer Risk Estimation via Soft Re-Ranked Retrieval and Hierarchical Anchors
提出以组织病理学为锚、其他模态仅用于训练的解耦框架,结合软重排序检索与分层锚框,在模态缺失下保持鲁棒性;其检索与分层锚框机制可迁移至其他多模态医学影像任务。
BriMA:面向多模态持续动作质量评估的桥接模态适应
BriMA: Bridged Modality Adaptation for Multi-Modal Continual Action Quality Assessment
针对多模态持续动作质量评估中模态缺失问题,提出记忆引导的桥接插补模块和模态感知回放机制,可复用于视频理解中模态不完整或动态变化的持续学习场景。