跳到正文
原文
arXiv cs.AI· Ming Zhong, Stacy Li, Nicholas Carlini, Matthew Jagielski·· 11 天前精选AI 评分62

Agent4Sci:前沿智能体能否自动化解决科学机器学习难题

Automating ML for Science: Can Frontier Agents Climb Scientific Hills in the Wild?

AI 导读

研究团队推出长周期测试基准 Agent4Sci,跨越 11 个领域的 20 个基准测试,评估前沿智能体提升科学机器学习最佳模型的能力。实验显示前沿智能体能在所有基准上取得进展,Claude Opus 达到 10.4% 的平均相对提升,但收益几乎完全来自机器学习工程技巧而非深层领域洞见,存在新颖性误判和过早陷入局部调优等限制。

推荐理由

论文通过 20 个科学机器学习基准揭示了前沿智能体主要依赖工程技巧而非科学洞见,并给出了通过插件技能翻倍性能的方法。

来源:arXiv cs.AI · arxiv.org