arXiv cs.AI· Chiming Duan, Tong Jia, Yingxi Chen, Minghua He, Lingzhe Zhang, Ying Li·· 6 天前AI 评分45
何时介入?LLM 智能体错误与自我恢复实证研究
When to Intervene? An Empirical Study of Errors and Self-Recovery in LLM Agents
AI 导读
针对 LLM 智能体错误与自愈能力的实证研究表明,构建的 ReInBench 数据集中有 725 次错误事件(共 1,403 次)能实现自我恢复,且通常在数步之内。研究据此提出自愈预测方法 ReCoF 来辅助判断介入时机,较最强基线实现了 9.02% 的 Macro-F1 相对提升。该项目的代码与数据已公开提供。
来源:arXiv cs.AI · arxiv.org