跳到正文
原文
arXiv cs.LG· Thomas Hannagan·· 19 天前AI 评分32

顺着不动点曲线:连续思维机(CTM)中的图像分类机制研究

Riding the Fixed-Point Curve: Image Classification in the Continuous Thought Machine

AI 导读

研究人员揭示了连续思维机(CTM)在 ImageNet 上的图像分类机制,其思考轨迹表现为神经状态紧跟逐步移动的局部唯一吸引不动点曲线。该曲线运动大多在不同图像间共享,且注意力调度高度通用:在每个时间步打乱图像间的 query 仅导致 7% 的分类准确率损失,图像无关增量预测下一个 query 的 R^2 达到 0.98。这表明 CTM 倾向于采用单一通用策略处理所有 ImageNet 图像。

来源:arXiv cs.LG · arxiv.org