跳到正文
原文
arXiv stat.ML· Drew T. Nguyen, William Fithian·· 22 天前AI 评分52

关于 AI 时间跨度的估计与有效性:对 METR 图表的统计学审视

On the estimation and validity of AI time horizons---a statistical look at the METR plot

AI 导读

研究者针对 METR 提出的 AI 50% 时间跨度指标,利用样条函数与项目反应理论放宽了对数线性假设,在 228 个任务和 26 个 AI 上重新计算了时间跨度估计。拟合结果显示人类用时在 2 至 30 分钟区间内难度几乎平坦,表明跨度从 3 分钟跃升至 30 分钟远比从 30 分钟跃升至 5 小时容易,研究同时提供了更优的点估计与构念效度诊断图。

来源:arXiv stat.ML · arxiv.org