跳到正文
原文
arXiv cs.AI· Chenjie Qiu, Boyan Xu, Shaobin Shi, Bingfeng Chen, Ruichu Cai, Dongsheng Luo·· 1 天前AI 评分38

规则更多、列表更长?在隐式规则课程上评测自进化智能体

More Rules, Longer Lists? Benchmarking Self-Evolving Agents on a Hidden-Rule Curriculum

AI 导读

研究者提出评测基准 CLR-Bench,包含 10 个领域的 20 条链,用于评估自进化智能体从反馈中学习隐藏规则的能力。评测 6 种自进化方法发现,多数方法在认证模型上仅靠堆砌特例且几乎无法泛化;但在 GPT-6-Sol 支持下,ACE 与 Dynamic Cheatsheet 仅凭反馈便达到 78% 准确率并解决 59-60% 的单元格。

来源:arXiv cs.AI · arxiv.org