跳到正文
原文
arXiv cs.AI· Jing Ding, Ziqiao Ma, Jiayuan Mao, Joyce Chai, Freda Shi·· 27 天前AI 评分37

Vision Transformer 中抽象概念接地的转喻电路研究

Metonymic Circuits for Abstract Concept Grounding in Vision Transformers

AI 导读

研究人员揭示了 Vision Transformer 通过具体锚点概念桥接视觉信号与抽象语义的“转喻接地”机制。通过对 CLIP 与 DINO 视觉编码器应用 Transcoder,研究追踪到由感知基元、具体物体锚点再到抽象目标构成的结构化转喻电路。因果干预实验进一步证实,此类转喻中间特征在模型识别抽象概念中发挥着关键功能作用。

来源:arXiv cs.AI · arxiv.org