Tag · 1 篇
OSMO: Open-vocabulary Self-eMOtion Tracking
OSIRIS 把用户个人情绪历史、当前表情与第一人称视觉观测一起作为多模态大模型的输入做时序推理,这种「历史状态 + 当前观测」的上下文建模方式可迁移到需要连续状态跟踪的视觉任务(如行为/事件跟踪、个性化助手);OSMO 的逐被试情绪时间线标注协议也为构建连续标签的多模态数据集提供参考。