Tag · 2 篇
视觉语言模型基准
分布 数据集与评测1视觉语言模型1
01 02
UI-Lens：评估通用多模态大语言模型自动化UI显示质量保证的潜力
UI-Lens: Assessing General MLLMs' Potential to Automate UI Display Quality Assurance
该基准揭示了MLLM/VLM在细粒度元素边界理解和序列界面语义一致性上的严重不足，为视觉研究提供了可复用的评测协议和失败模式分析，可推动面向复杂真实界面的细粒度感知与推理方法研究。
SEA：通过元素级常识视觉问答评估草图抽象效率
SEA: Evaluating Sketch Abstraction Efficiency via Element-level Commonsense Visual Question Answering
把 VQA 模型当作「元素存在性检测器」来给草图抽象效率打分，这个无参考、元素级的评估范式可以迁移到任何需要衡量「语义保留 vs 视觉简化」的生成任务上（如简笔画生成、图标/logo 生成、示意图生成的质量评估）。