arXiv cs.AI· Jingjie Qiu, Sheldon Yu, Xunyi Jiang, Jiajin Liu, Zihan Huang, Zhendong Chu, Tong Yu, Julian McAuley, Junda Wu·· 18 天前AI 评分49
隐式思维链真的在推理吗?统一的隐式推理分类框架
Does Latent Chain-of-Thought Actually Reason? A Single, Unifying Taxonomy for Latent Reasoning
AI 导读
新研究通过涵盖 3 种训练方案、3 项推理任务与 2 个骨干模型的 21 种配置,系统评估了隐式思维链是否真正参与推理。实验表明逻辑任务中 COCONUT 答案常在链启动前已可读且删除链对预测几乎无影响,而算术任务均依赖链内容,证明可读隐状态本身不足以证明推理发生。研究据此提出了区分链表征内容与模型实际使用方式的统一分类框架。
来源:arXiv cs.AI · arxiv.org