arXiv cs.AI· Andre Fu, Malik Drabla, Leon Liu, Meji Abidoye, Marek Suppa, Lata Mishra, Adnan El Assadi, Yiyuan Li·· 2026-10-02AI 评分41
Incident-Arena:让智能体迈向极高可靠性
Incident-Arena: Getting agents to the last nine of reliability
AI 导读
研究团队推出 Incident-Arena 基准,用于评估 AI 智能体在生产环境中的故障响应与 SRE(站点可靠性工程)能力。该基准包含在临时 Kubernetes 集群中部署的 20 个真实任务与功能验证机制,智能体测试平均耗费 2.81M tokens 与 41 轮交互。评测显示前沿模型得分均低于 64.3%,失败原因涵盖诊断定位错误、修复不完整与不安全回归。
来源:arXiv cs.AI · arxiv.org