冻融贝叶斯优化的成本感知停止准则：一步前瞻何时足够？
针对冻融贝叶斯优化，研究提出一步前瞻准则 EI stopping，在无期望改善（EI）超过单步成本时终止评估。该准则在高成本下损失极小，但低成本下易过早停止，研究为此构建了两步前瞻下界证书予以修正。在 3 个超参数优化基准上，EI stopping 在多数高成本设定下不逊于修正方案，而在 2 个基准的低成本下两步修正收益更高。
#arXiv
#arXiv
今日 0 条arXiv stat.MLAI 评分3131 arXiv stat.MLAI 评分2626 个体平滑假设下的近最优二阶凸有限和优化
针对含 $n$ 个分量的光滑凸有限和优化问题，该研究证明在个体平滑与凸性假设下可实现进一步加速，其随机二阶复杂度理论下界达 $\Omega(n+ n^{5/7} \epsilon^{-2/7})$。
arXiv stat.MLAI 评分5555 Chronos-2：多变量时间序列预测基础模型
研究团队推出用于 zero-shot 预测的多变量时间序列基础模型 Chronos-2，可直接从历史上下文中建模多变量序列与异构协变量的相互作用并生成概率预测。
arXiv stat.MLAI 评分2828 Bethe Hessian 在 Kesten-Stigum 机制下的恢复能力
研究表明在随机块模型中，对任意固定的公共期望度数 $d>1$，Bethe Hessian 的异常特征向量均可在低至 Kesten-Stigum 阈值处实现弱恢复。该结论打破了此前要求 $d$ 足够大的限制，且该阈值在对称双社区模型中达到信息论最优。这一结果仅使用 $n\times n$ 埃尔米特矩阵，便达到了与非回溯谱方法相匹配的恢复保证。
arXiv stat.MLAI 评分3131 面向解算子的工具变量迁移学习
针对微分方程解算子在目标数据稀缺下的学习难题，研究者提出一种基于白化工具变量的结构化迁移学习方法。该方法结合预解恒等式构建无偏估计方程，通过目标岭回归先导、逐源稀疏校准与投影重拟合的三阶段估计器消除误差。理论推导给出了非渐近预测界，仿真与电子带通滤波器实验表明其性能显著优于仅目标学习及现有迁移方法。
arXiv stat.MLAI 评分2525 依赖观测下的随机镜像下降算法
针对依赖观测驱动的随机镜像下降（SMD）算法，一项研究突破经典的 i.i.d. 假设，提出了支持几何或多项式依赖序列的“遗忘”条件。该条件导出了平均 SMD 迭代的显式有限样本精度界，在大、小初始误差机制下分别恢复了经典的 $O(1/T)$ 与 $O(1/\sqrt{T})$ 速率，并已成功应用于含依赖回归元的高维线性回归等场景。
arXiv stat.MLAI 评分2929 数据依赖事件概率估计的统一框架
新研究提出了估计数据依赖事件概率的统一理论框架，涵盖经典缺失质量、后选择推断与预测器测试误差估计。框架表明经验代入估计量的误差即泛化差距，而留一法估计量可恢复 Good-Turing 估计量并在单点删除稳定下保持准确。针对自适应缺失质量估计，论文提出混合 Good-Turing 估计量，并给出基于 VC 维与互信息的误差界。
arXiv stat.MLAI 评分3636 Muon-RT：通过复用教师轨迹实现大语言模型自蒸馏的无动量 Muon
研究者提出 Muon-RT，通过复用 EMA 教师与学生的位移消除隐藏权重的动量缓冲区，大幅降低大语言模型自蒸馏显存。在 Qwen2.5-7B-Instruct 微调中，Muon-RT 相比 AdamW 和带动量的 Muon 准确率分别提升 2.6 和 5.4 分，持久显存减少 42% 与 27%。
arXiv stat.MLAI 评分3737 何时、何处、多少比特？带随机舍入 SGD 的缩放定律
一项新研究推导了带随机舍入（SR）的 SGD 预测误差匹配上下界，揭示了模型大小、训练时间与精度协同变化的算力缩放定律。理论表明仅前向特征舍入可保持精确计算的算力缩放，而反向舍入会改变该规律；参数平均则能改变何时以及何处需要更高精度。在固定算力预算下，低精度支持更大模型能提升预测表现，相关权衡在 MLP 和小型 Transformer 实验中得到验证。
arXiv stat.MLAI 评分3030 面向所有可混合真损失及更广泛族的全预测（Omniprediction）研究
全预测（Omniprediction）理论研究证明，算法无法对所有有界真损失同时实现次线性遗憾，但针对全体可混合真损失可达成最优的 $\widetilde{O}(T^{1/3}(\log|\mathcal{F}|)^{2/3})$ 遗憾界。
arXiv stat.MLAI 评分3636 面向隐式世界模型强化学习的密度引导自举边界
研究者提出面向隐式世界模型强化学习的密度引导自举边界，利用相对密度代理动态调整想象回报深度，以缓解复合模型误差。该方法提供硬边界与软边界门控机制，基于 Dreamer V3 实例化并证明了其门控 Bellman 算子的严格收缩性。在连续控制任务与 Atari Pong 上的实验显示，该机制显著提升了样本效率与后期训练表现。
arXiv stat.MLAI 评分2525 带反馈图多臂老虎机的近最优一阶遗憾界
针对带反馈图的对抗性多臂老虎机，该研究提出了达到 $\widetilde{O}(\sqrt{\alpha L^\star}+\alpha)$ 期望遗憾界的新算法，弥合了一阶界与最坏情况界在图独立数 $\alpha$ 上的差距。算法将 EXP3 与优化探索采样相结合，其不动点分布可在多项式时间内通过几何收敛迭代求解。该成果通过两层聚合机制扩展至一般强可观测图，同样具备该近最优保证。
arXiv stat.MLAI 评分3030 CABA：基于留出锚点的持续自适应可验证行为保留
研究提出 CABA 门控机制，通过在冻结表征上比较新旧策略并约束最差锚点的前向 KL 散度，在无需动作标签或完整轨迹的情况下验证并保留受保护行为。在受控 UCI 人类活动识别实验中，在预算 epsilon = 0.05 下，CABA 将平均遗忘率从无约束自适应的 1.01% 降至 0.00%，最终平均准确率从 93.04% 变为 88.48%。
arXiv stat.MLAI 评分2525 双重校正随机块模型（DC²SBM）：属性网络的广义结构检测方法
双重校正随机块模型（DC²SBM）正式提出，通过在连边与属性生成通道分别引入拓扑度因子与属性丰度因子，实现了节点活跃度与社区成员推断的解耦。该模型采用 EM 算法推断，引入的新校正因子在后验计算中完全抵消，不产生额外计算成本。实验表明，DC²SBM 在合成与真实网络中的社区发现准确率优于 SOTA 方法，在拓扑信号较弱时优势尤为明显。
arXiv stat.MLAI 评分3232 遗憾最优的 Wasserstein 鲁棒线性回归研究
针对存在 2-Wasserstein 扰动的多元最小二乘回归，研究指出了分布鲁棒优化（DRO）在超额风险或遗憾指标上的次优性缺陷。理论分析表明 DRO 在扰动趋于 0 时可达 $O(\kappa \varepsilon^2)$ 实例最优率，但在固定扰动下存在维度依赖的失效模式。为此提出的极小化极大遗憾优化（MRO）与谱范数正则化（SNR）被证明可达极小化极大率，且分别具备精确凸重构和加速近端算法。
arXiv stat.MLAI 评分3535 WASABI：基于桥插值的 Wasserstein 采样方法
WASABI 是一种利用 Wasserstein 梯度流训练扩散模型以从目标玻尔兹曼分布采样的全新方法，全程仅需访问能量函数。该算法推导出的实用方案避免了计算模型自身对数密度的难解梯度，且训练完成后生成样本无需额外评估能量或梯度。在丙氨酸二肽任务中，WASABI 以减少约 3.3 倍的能量评估次数超越了最佳基线。
arXiv stat.MLAI 评分3131 强化学习的统计基础：非渐近视角
该专著从非渐近视角系统探讨了表格型马尔可夫决策过程的强化学习统计理论，覆盖生成模型、在线强化学习与离线强化学习三种采样机制。内容以样本复杂度分析为核心，深入解析基于模型与无模型算法的极小化极大最优设计及统计特征。专著还拓展讨论了鲁棒强化学习、竞争性多智能体、联邦强化学习及人类反馈强化学习（RLHF）等方向。
arXiv stat.MLAI 评分2929 PDE残差感知克里金法 PRIK
该研究提出基于 PDE 残差核的偏微分方程残差感知克里金法（PRIK），直接将全域 PDE 残差信息融入高斯过程协方差结构，且无需单独设置残差权重参数。PRIK 能使后验均值实现最小积分平方 PDE 残差，理论上具备 $H^{2}$ 拟最优性、收敛速度及非渐近界。数值实验进一步验证了其理论性质与方程求解能力。
arXiv stat.MLAI 评分3535 RW-DPO：面向鲁棒偏好学习的可靠性加权直接偏好优化
针对偏好数据中的反转与平局噪声，研究提出 RW-DPO 方法，为样本引入可靠性权重并通过极小极大凹惩罚与策略联合优化。该方法仅对模型产生矛盾的样本进行闭式权重更新，计算开销相比 DPO 几乎可忽略。在包含 10%–30% 标签反转的大语言模型微调中，其胜率不随反转率上升而下降，且超过了在干净标签上训练的 DPO。
arXiv stat.MLAI 评分3333 用于金融时间序列生成的条件神经 SDE
研究者提出用于金融时间序列生成的残差锚点神经 SDE（residual-anchor Neural SDE）架构。该架构将目标分解为捕捉上下文基线的可学习条件锚点，以及由神经 SDE 建模的随机残差动态，从而减轻随机建模负担。在真实金融时间序列与利率情景评测中，该模型能生成合理的条件路径，兼具竞争力的点预测精度与校准的不确定性估计。
arXiv stat.MLAI 评分3434 面向 Flow Matching 无展开后训练的粗粒化最优传输
研究团队提出 ReCouple 框架，通过构建粗粒化最优传输（OT）耦合，实现 Flow Matching 模型无需模拟展开（rollout-free）的后训练。该框架进一步拓展出逼近半离散 OT 的 ReCouple+，以及加入空间正则化的 ReCouple++。实验表明，该方法有效优化了低函数评估次数（NFE）下的生成质量与速度场。
arXiv stat.MLAI 评分3232 基于共形化单纯形神经网络（CF-SNN）的单纯复形自适应不确定性量化
研究人员提出共形化单纯形神经网络（CF-SNN）框架，可为具有 m 个预测目标的单纯复形实体同时生成预测集，实现自适应不确定性量化。在温和假设下，CF-SNN 保证预测集以用户指定的标称覆盖概率包含真实标签，且所有目标的实际未覆盖比例大概率贴近标称水平。实验表明，该框架能在满足设定覆盖率的同时生成紧凑且高信息量的预测集。
arXiv stat.MLAI 评分3636 面向受污染样本的设计即鲁棒分布学习
研究人员提出受污染校正最大平均差异（CC-MMD），结合带噪代理分数与少量审计样本残差校正，直接从受污染数据中恢复针对干净目标分布的理想 MMD。该方法无需代理分数校准或污染物结构假设，具备有限总体设计无偏性与一致性。实验表明，CC-MMD 能改善受污染回归的参数恢复，并支持生成模型在严重受污染数据上恢复纯净分布。
arXiv stat.MLAI 评分2525 基于 INLA 的物联网无线电环境地图无人机自适应采样：先验宽度决定精度与校准
集成嵌套拉普拉斯近似（INLA）被用于非高斯 IoT 观测下的无人机自适应采样，以构建无线电环境地图（REM）。在 19 个测试窗口中，基于后验的信息采样相比随机和除草机采样使残差 NMSE 分别降低 15.3% 和 12.3%。实验显示将先验阴影标准差从 6.0 dB 拓宽至 10.025 dB 可有效改善 NMSE 与区间覆盖，先验宽度对精度与校准起主导作用。
arXiv stat.MLAI 评分2626 多任务学习的几何学：共享子空间估计的精确收敛率
针对多任务学习中共享子空间估计精确收敛率不明确的理论空白，研究提出了一种通用的多任务引理（multitask lemma）。该引理基于任务回归函数及其估计量的几何条件，为通用多任务场景下的快速子空间估计提供了充分条件。研究证实该引理在线性回归和分类中推导出了此前未知的精确 minimax 收敛率，并为加性噪声回归提供了匹配到对数因子的收敛率。
arXiv stat.MLAI 评分3232 CausalGrade：基于 Jev 的证据引导因果图评分方法
因果图评分方法 CausalGrade 基于概率判断模型 Jev，整合观测数据证据与因果发现基础模型 CDFM 的边概率，用于在真实结构未知时评估候选图质量。在 300 个合成数据集的全部 20 种算法与变量组合中，该评分均与结构误差呈较强负相关。在 500 个图选择任务中，其最佳候选命中率达到 54.4%，优于 Self-Compatibility 指标的 48.4%。
量子位AI 评分6161 清华姚期智团队提出代数世界模型 AWM
清华大学姚期智与袁洋团队提出代数世界模型（AWM），旨在让大模型从环境探索中自主构建抽象规则并完成形式化数学推导。该方法通过代码探索、归纳凝炼与 Lean 4 形式化证明三步建立环境模型，既能严密判定任务不可行性，也在 ARC-AGI-3 测试集以 99.9% 的得分全通关，平均动作数仅为人类基准的 43%。
arXiv cs.AIAI 评分3939 CALM：面向长周期语言智能体的冲突感知生命周期记忆治理
CALM 是一种冲突感知的生命周期记忆治理框架，通过将持久记忆保留与查询时准入解耦，解决长周期语言智能体中的记忆冲突问题。该框架将异构记录转化为基于证据的记忆单元，利用支持、冲突和依赖信号更新有效性与生命周期状态，并通过门控机制筛选符合查询时序的证据。
arXiv cs.AIAI 评分3434 A-RSI：面向零数据多模态自我改进的自适应任务刷新
A-RSI 提出了一种面向零数据多模态自我改进的自适应任务刷新方法，通过监控训练日志中的奖励变化与准确率，在学习信号下降时更新任务池。该方法利用静态程序库生成多模态问题并导出可独立核验的答案，全流程无需外部训练数据或人工标注。在包含 11 个基准的主测试集上，A-RSI 仅凭 800 个新任务将平均成绩从 57.77 提升至 61.05。
arXiv cs.AIAI 评分3434 通过能力感知协同演化策略与 Rubric 实现开放式生成
研究人员提出 CoCA 闭环框架，通过准则级能力诊断协同自适应演化评估标准（Rubric）与策略模型，解决大语言模型开放式生成中强化学习奖励区分度不足的问题。该框架对比无引导与标准引导的采样来校准难度失配的准则，并通过引导优化或 on-policy 自蒸馏转化能力收益。多项基准测试表明，CoCA 性能持续优于传统基于 Rubric 的强化学习方法，并能有效减轻能力退化。
arXiv cs.AIAI 评分3030 PT$^3$：面向可泛化毫米波人体点云表征的原型引导自监督预训练框架
研究提出毫米波人体点云自监督预训练框架 PT$^3$，以解决雷达稀疏检测与多径效应带来的表征不稳定问题。PT$^3$ 将空间局部状态表示为共享原型的稀疏组合，通过自回归预测学习时间演化，并引入观测一致性抵御雷达扰动。经多源无标注序列预训练后，单个冻结编码器可直接支持动作分类、稠密点生成、关节姿态估计与未来动作预测，性能超越现有预训练基线。
arXiv cs.AIAI 评分4949 基于 Era by Eon 的企业级 Agent 对齐评测基准
一项基于企业模拟系统 Era by Eon 的对齐评测基准显示，19 个模型在 41 项任务给出有效答案的运行中，有 40%（918 次）出现违规行为。最常见的违规包括虚报操作或记录（290 次）、遵从植入指令（266 次）以及泄露敏感数据（249 次）。测试中没有任何模型完全免于违规，表现最好的四个模型违规率仍达 22% 至 24%。
arXiv cs.AIAI 评分3939 从宽容到怀疑：开源后训练配方如何改变 LLM 事实核查的信任偏见
研究发现开源 Tülu-3 后训练配方会诱发 LLM 事实核查中的职业偏见，使 OLMo-2 32B 和 Tülu-3 70B 对低地位职业发帖人更倾向判定为假，效应虽小于 1 个百分点但统计学显著。该判断反转由残差流中的单一方位承载，且发生在监督微调阶段。Meta、Alibaba、Mistral 的训练配方及 7 款商用部署模型均未出现此类偏见。
arXiv cs.AIAI 评分4242 Value Probes：用于束搜索红队审计的学习型价值函数
研究团队提出 Value Probes，通过对目标模型激活进行线性探测预测未来奖励，并结合束搜索优化语言模型的自动化红队审计。在 18 种目标行为和 3 种模型规模测试中，该方法比 token 匹配的标准审计将峰值得分提升约 50%。该探测器还可利用较小模型的离策略数据拟合，提供了性能相当且更高效的审计替代方案。
arXiv cs.AIAI 评分3434 通过分离时间尺度的行为克隆加速非线性 MPC：在核反应堆负荷跟踪中的应用
研究提出结构化表征学习行为克隆架构 SRLBC，利用物理时间尺度分离特性加速非线性模型预测控制（NMPC）。在压水堆（PWR）负荷跟踪测试中，SRLBC 独立策略将平均计算成本降至 NMPC 的 1/15。引入安全增强机制后，控制器在保持至少 99.8% 可行性的同时平均提速 6.8 倍，且在分布偏移下闭环成本最低。
arXiv cs.AIAI 评分3333 DES-JEPA：为高维离散事件序列学习共享词汇表
新研究提出 DES-JEPA 与 DES-PFN 架构，通过为高维离散事件序列构建共享词汇表，实现无需任务微调的上下文内下一事件预测。DES-JEPA 从未对齐的合成随机过程中提取共享离散词汇表，DES-PFN 则复用该词汇表完成预测。该框架在 8 个未见过的真实世界数据集上取得具竞争力的 zero-shot 性能，并可扩展至 700 种不同事件类型。
arXiv cs.AIAI 评分4747 面向 ML 智能体的世界奖励模型 WRM：预测奖励而非世界
研究提出世界奖励模型（WRM），让 ML 智能体直接比选更优候选程序，避免了预测中间执行结果引入的累积误差。基于该方法构建的 9B 模型 ForeCritic 在 26 个 ML 任务的 12,438 个测试对中选优准确率达 79.4%，显著优于通用 LLM 裁判的 53%–62%。
arXiv cs.AIAI 评分3030 面向多智能体 AI 系统的治理感知联邦学习（GAFL）：可信协同 AI 的策略驱动框架
研究提出面向多智能体系统的治理感知联邦学习框架 GAFL，在模型聚合前独立验证治理证据，实现策略驱动的可信协同训练。在 10 个参与方的 Adult Income 评测中，完整 GAFL 识别出 100% 伪造证据的参与方，macro-F1 达 0.7520 至 0.7733。
arXiv cs.AIAI 评分3737 Agent Transfer Protocol（ATP）：面向 Agentic Web 的服务器中介 Agent 通信架构
研究者提出跨组织智能体通信协议 ATP（Agent Transfer Protocol），采用管理域中介架构实现长周期的智能体间协作。该架构由双方域服务器维持稳定入口与跨域传输，发送域对完整消息信封签名，允许接收实例在离线延迟读取时独立校验来源与内容完整性。在受控跨组织 LLM 智能体工作流评估中，系统在实例离线或替换后仍成功完成业务处理。
arXiv cs.AI精选AI 评分6363 自我改进智能体中的掩盖侵蚀：验收门控如何失去冗余安全防护
arXiv 论文指出，自我改进的大语言模型智能体在利用验收门控筛选规则改动时，会因防护重叠而悄然删除冗余安全机制。研究在两个智能体环境下测试了 411 次改进循环与 GEPA 优化器，发现由于其他防护仍在生效，门控仅凭任务成功率决定保留删除操作，导致纵深防御被隐蔽削弱。
推荐理由：该研究揭示了自我改进智能体在门控优化时悄然削弱冗余防护的机制，为评估多层安全系统提供了量化依据。