Tag · 2 篇
语义嵌入
分布 高效模型与推理加速1医学影像与生物视觉1
01 02
SG-LoRA:语义引导的低秩适配参数生成
SG-LoRA: Semantic-guided LoRA Parameters Generation
对视觉研究者而言,这是一种用任务文本描述在共享嵌入空间中检索并生成 LoRA 权重的免训练方案,可直接用于为未见过的下游视觉任务(如新风格、新域识别)实时构建个性化适配器,避免逐任务微调;其语义到 LoRA 的生成管线也可迁移到扩散模型、VLM 等大模型的高效定制。
连接大脑与语义:面向语义增强 fMRI 视频重建的分层框架
Bridging Brain and Semantics: A Hierarchical Framework for Semantically Enhanced fMRI-to-Video Reconstruction
把 fMRI 信号映射到同时包含文本语义、图像内容、动作概念与物体类别的联合嵌入空间,再用记忆库检索融合来约束视频生成,这套「语义富化 + 记忆检索」的两阶段思路可迁移到脑机解码之外的弱条件视频生成与跨模态检索增强生成。