Tag · 2 篇
多模态图学习
分布 数据集与评测1医学影像与生物视觉1
01 02
GraphVLM：面向多模态图学习的视觉语言模型基准测试
GraphVLM: Benchmarking Vision Language Models for Multimodal Graph Learning
该基准系统评估了VLM作为编码器、对齐器和预测器三种范式在多模态图学习中的表现，为视觉研究者将VLM与图结构数据结合提供了可复用的评测框架和范式参考。
基于知识引导多模态图学习从高内涵图谱解析基因型-表型机制
Deciphering Genotype-Phenotype Mechanisms from High-Content Profiling via Knowledge-Guided Multi-modal Graph Learning
把高内涵细胞形态学表型当作图上的关系信号而非节点特征，并学习逐边置信度与知识门控，这一思路可迁移到视觉中需要将图像特征嵌入结构化知识图谱的任务（如场景图推理、视觉-知识联合推理），也为细胞成像的表征学习提供了可解释的图建模范式。