跳到正文
原文
arXiv cs.AI· Chiming Duan, Tong Jia, Yingxi Chen, Minghua He, Lingzhe Zhang, Ying Li·· 6 天前AI 评分45

何时介入?LLM 智能体错误与自我恢复实证研究

When to Intervene? An Empirical Study of Errors and Self-Recovery in LLM Agents

AI 导读

针对 LLM 智能体错误与自愈能力的实证研究表明,构建的 ReInBench 数据集中有 725 次错误事件(共 1,403 次)能实现自我恢复,且通常在数步之内。研究据此提出自愈预测方法 ReCoF 来辅助判断介入时机,较最强基线实现了 9.02% 的 Macro-F1 相对提升。该项目的代码与数据已公开提供。

来源:arXiv cs.AI · arxiv.org