arXiv cs.LG· Kehui Yao, Chuanbo Hu, Jiao Chen, Ramin Giahi, Reza Yousefi Maragheh, Lalitesh Morishetti, Ziwei Hong, Yiyun Su, Jianpeng Xu, Evren Korpeoglu, Kannan Achan·· 12 天前AI 评分46
面向迭代式 ML 智能体测试套件的显式反馈契约
An Explicit Feedback Contract for Iterative ML-Agent Harnesses
AI 导读
研究提出一种面向迭代式 ML 智能体测试框架的显式反馈契约，仅在提交结果超出基于配对标准误计算的噪声阈值时释放验证分数。在无信号控制任务中，该契约将智能体虚报的增益从精确反馈下的 0.0157 降至 0.0033，并收窄了真实任务的验证与测试集差距。相比精确反馈耗尽 30 次提交预算，契约机制在 4 至 12 次后及早停止，避免了盲目追逐噪声。
来源：arXiv cs.LG · arxiv.org