Tag · 2 篇
电路发现
分布 鲁棒性与安全1可解释性与可视化1
01 02
由内而外:通过内部工作机制度量视觉 Transformer 的泛化
Inside-Out: Measuring Generalization in Vision Transformers Through Inner Workings
提出用模型内部电路(因果交互)作为无标签泛化代理指标,视觉研究者可在部署前模型选择与部署后分布偏移监控中复用该思路,替代不可靠的置信度指标。
面向充分必要电路的全局信息阈值化
Global Information Thresholding for Sufficient and Necessary Circuits
为视觉模型(如 ViT、CLIP 视觉编码器)的电路级机制分析提供了一套无需人工设定电路规模的阈值选取流程:先用保号积分梯度给边打分,再按行为保留准则确定全局截断点,可直接迁移到视觉 Transformer 的注意力头/MLP 电路发现与充分性-必要性评估。