arXiv cs.AI· Chen Wu, Josh Passenger, Yin Song·· 25 天前AI 评分49
追踪编程智能体玩 ARC-AGI-3 的思维轨迹:对持续学习的启示
Tracing the Thoughts of a Coding Agent Playing ARC-AGI-3: Lessons for Continual Learning
AI 导读
一项研究通过让基于冻结基础模型的编程智能体挑战交互式推理基准 ARC-AGI-3,提出了一套通过脚本与笔记追踪其思维轨迹的度量协议,白盒分析其持续学习机制。在 2 个模型家族中 3 个骨干模型的 7 次评估显示,跨任务调用的脚本仅占 33/630,智能体会遗弃 74% 的已有脚本并重写通用规则,笔记亦只追加不修改。
来源:arXiv cs.AI · arxiv.org