跳到正文
热点事件观察中

研究人员提出Seq@K协议 评估大模型序列反馈修正能力

1 篇报道1 个报道来源3 天前更新

先了解这件事

AI 综述

2026年10月31日,arXiv cs.AI 发布研究,提出了一种名为 Seq@K 的评测协议。该协议旨在衡量大语言模型在每次失败并获得反馈后,能否在 K 次连续尝试内解决问题,从而形式化评估模型基于反馈进行迭代修正的能力。在 7 个评测基准与 16 个前沿模型上的实验显示,Seq@K 呈现出与传统 Pass@K 显著不同的模型排名和 Pareto 前沿,并能有效刻画模型的纠错率与回答固执度等行为特征。

AI 根据报道生成 · 2 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月31日
  1. arXiv cs.AI
    Seq@K:在序列反馈下评估语言模型

    研究人员提出评测协议 Seq@K,用于衡量大语言模型在每次失败获得反馈后能否在 K 次连续尝试内解决问题,以形式化评估模型从反馈中迭代修正的能力。在 7 个评测基准与 16 个前沿模型上的实验显示,Seq@K 呈现出与 Pass@K 显著不同的模型排名和 Pareto 前沿,并能有效刻画模型的纠错率与回答固执度等行为特征。

本事件热度走势

当前热度 3·可比范围峰值 7(11月1日 03:00)·近 24 小时可比范围变化 -49%

0246811月1日03:0011月1日14:0011月2日00:0011月2日11:00

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。