PXtal：在跨模态信息不对称下对齐粉末 X 射线衍射与晶体结构
研究人员提出多模态框架 PXtal，采用不平衡最优传输（UOT）与广义 KL（GKL）散度，解决粉末 X 射线衍射（PXRD）与晶体结构之间的跨模态信息不对称对齐难题。在包含 4 个零样本迁移集的 6 个测试集上，PXtal 在 PXRD 到晶体候选检索任务中均优于基线模型，所得编码器能更有效迁移至下游材料与晶体学任务。
#arXiv
#arXiv
今日 0 条arXiv cs.LGAI 评分3434 arXiv cs.LGAI 评分1010 超越遍历之墙：用于分析 AI 扩展极限与复杂度坍缩的离散几何物理沙盒
研究指出当前深度学习存在遍历性上限，提出一种由全息 E8 投影引擎驱动的数字物理沙盒，用于分析 AI 扩展极限并实施硬物理遏制。该沙盒将时空建模为嵌套面心立方晶格并引入严格整数运算，通过限制在物理守恒的因果轨迹来剪枝组合搜索树，提供了将计算复杂度从 NP 坍缩至多项式时间 P 的机制。
arXiv cs.LGAI 评分3535 用于阿尔茨海默病诊断与进展预测的防泄漏多模态学习框架
研究人员提出融合 SFCN MRI 编码器、因果临床 Transformer 与 ODE-GRU 动力学的多模态框架，用于阿尔茨海默病诊断及进展预测。在涵盖 ADNI、OASIS-2 等数据集中 2,649 名受试者的验证中，内部混合诊断与阶段 1 进展 AUROC 分别达 0.951 和 0.909，下次随访 MMSE 的 MAE 为 1.61。
arXiv cs.LGAI 评分3535 CARing：面向诊断预测的医疗 Token 覆盖感知推理
CARing 框架通过组合式语义 ID（SIDs）与覆盖奖励强化学习，解决了大语言模型在多标签就诊诊断预测中覆盖不足与分词碎片化的问题。该方法利用残差量化将疾病语义编码为紧凑 token，并通过覆盖奖励与多正样本监督优化多标签推理轨迹。在 MIMIC-III 和 MIMIC-IV 上，CARing 加权 F1 超越全部基线，推理模式下 R@30 分别达 46.04% 和 46.52%。
arXiv cs.LGAI 评分4444 可见链式推理并非通用优化手段：分析代码生成中受人设与思考配置影响的研究
研究发现显式链式推理（visible CoT）在分析代码生成中不具备普遍的准确率优势，推理表征匹配目标语言也无法带来持续增益。通过在 SQL 和 Python（pandas）基准上的对比评测，其效果高度依赖于人设表述、目标语言以及模型内部推理配置。研究表明推理策略需根据具体模型、任务目标与配置联合选择，而非直接作为通用默认设置。
arXiv cs.LGAI 评分3232 Phase-HDC：在离散相位学习中用梯度阈值替代优化器历史
Phase-HDC 提出以梯度阈值替代优化器动量历史，使低比特相位模型训练时除模型本身外无需存储优化器状态。在 11 个数据集上，其逻辑状态存储比 float32 Adam 减少 16–23 倍、比 8-bit Adam 减少 4–6 倍，且准确率能匹配 6-bit 动量 Adam。其准确率虽比 float32 Adam 低约 5 个百分点，但在 6 个数据集上反超了 8-bit Adam。
arXiv cs.LGAI 评分3434 Kolmogorov-Arnold 网络的样本效率研究
研究表明，在 Feynman 数据集与 Gymnasium 强化学习基准测试中，Kolmogorov-Arnold 网络相比传统多层感知机可用减少 40% 的样本达到类似性能。该架构在训练过程中能带来最高 50% 的相对性能提升，且对不同程度的奖励噪声具有鲁棒性，相关代码已开源。
arXiv cs.LGAI 评分3232 循环自我提升：面向循环大语言模型的动态跨循环 on-policy 蒸馏
研究者提出面向循环大语言模型（LoopLMs）的跨循环 on-policy 知识蒸馏框架 LoopOPD 及其动态版本 D-LoopOPD，利用内部循环计算作为自身监督来源，无需外部教师即可实现循环自我提升。在 Ouro-Thinking 模型上的实验表明，仅在数学数据上训练即可提升数学推理、通用推理及代码生成表现。相关代码和模型权重将在接收后开源。
arXiv cs.LGAI 评分4545 MoE 路由器遥测引发隐私泄露：新型成员推断攻击研究
新研究提出一种路由器增强成员推断攻击，发现 MoE 模型的路由器遥测数据会显著泄露微调数据隐私。在 3 种 MoE 架构和 3 个数据领域的全部 9 种设置中，结合路由特征使 1% FPR 下的 TPR 提升了 2.7–9.4 个百分点。该泄漏在全量微调、冻结路由器训练、LoRA 与指令微调中均持续存在，表明运维遥测已成为微调 MoE 模型的新隐私攻击面。
arXiv cs.LGAI 评分2828 基于时间 Transformer CAN 编码器与联邦轻量头的车载网络异常检测
研究人员提出一种基于时间 Transformer CAN 编码器与联邦轻量头的车载网络异常检测隐私保护框架。该方案通过轻量级 Transformer 编码器捕获信号随时间演化的细微时序和上下文异常，并借助联邦学习机制支持多辆车或 ECU 协同优化共享模型，无需交换原始 CAN 数据。开源数据集实验表明，该方法在兼顾效率与隐私的同时具备稳健的检测性能。
arXiv cs.LGAI 评分3636 激活探针所需的合成数据量取决于覆盖度而非难度
研究发现激活探针所需的合成数据量取决于覆盖度而非难度：在 Gemma-3-27B-IT 上，高风险与有害概念仅需 80 个合成样本即可接近平台期，而指令探针需数倍样本。各类评估分布达到半增益中位数均仅需 7-11 个同类样本，跨类别迁移能力的差异决定了不同概念对数据广度的依赖程度。相关评估套件与生成数据集已开源。
arXiv cs.LGAI 评分4343 SPERA：基于几何与频域感知潜空间预测的球面先验 EEG 基础模型
研究人员推出脑电基础模型 SPERA，采用联合嵌入预测架构（JEPA）在潜空间进行预测，并引入勒让德多项式空间先验编码电极几何构型。该模型基于 106 个数据集中 29,048 名受试者的约 80,000 小时 EEG 数据完成预训练。SPERA 在涵盖临床、认知与 BCI 应用的 9 个下游任务中取得了最高的平均平衡准确率。
arXiv cs.LGAI 评分3636 冻结解码器并修复编码器：基于 SVD 的 KV cache 压缩参数高效适配
针对基于 SVD 的 KV cache 压缩微调，研究指出采用冻结解码器、仅修复编码器的方案，在独立调优学习率后可达到与微调双边相当的精度恢复效果。该方案实测可节省 3x 的可训练参数量，并减少 3x 的优化器状态显存占用。团队在 Qwen2.5-VL-3B-Instruct 及纯文本基准上完成了验证，同时警示使用单一共享学习率对比不同微调方案会制造虚假优势。
arXiv stat.MLAI 评分2929 面向分数增强神经比率估计的自适应无调优损失加权
针对分数增强神经比率估计（Neural Ratio Estimation），研究者提出一种自适应且无需调优的算法，能在训练期间基于损失梯度动态设定分数损失权重。在网络动力学与空间过程案例中，该方法以极低额外开销提升了替代模型质量。测试显示，该方法在训练时间增加不足 1.1x 的情况下，取得了等同于训练数据增加 10x 的下游推理性能。
arXiv stat.MLAI 评分3434 学习模拟混沌：对抗最优传输正则化
研究团队提出一种对抗最优传输正则化方法，能仅从单条带噪声轨迹联合学习高质量汇总统计量与物理一致的仿真器，以模拟复杂的混沌动力学。该方法构建了 Sinkhorn 散度（2-Wasserstein）和 WGAN 风格对偶（1-Wasserstein）两种形式。在包含高维时空混沌的多种系统实验中，其训练的仿真器显著提升了长期统计保真度。
arXiv stat.MLAI 评分3131 V-ECE：估计广义预期校准误差
变分估计器 V-ECE 可直接估计涵盖 $L_p$ 距离的广义预期校准误差，完全无需依赖分箱或聚类。该方法通过梯度提升拟合温度缩放残差来估计超额风险，能在数学期望上给出真实校准误差的下界。在半合成任务基准测试中，V-ECE 在二分类场景中位列最精准水平，并显著超越现有的多分类估计器。
arXiv stat.MLAI 评分3333 One Permutation Is All You Need：快速确定性特征重要性与模型压力测试
研究提出用单次极大极小秩最优确定性置换替代传统蒙特卡洛洗牌，消除了特征重要性估计方差，并将计算复杂度从 $O(B \cdot n \cdot p)$ 降至 $O(n \cdot p)$。该框架进一步引入量化间接特征依赖的系统特征重要性（SFI），以及提供带符号表征的重要性方向。相关方法在近 200 个模拟场景和两个真实信用风险案例中完成验证，可高效审计模型对受保护属性的隐性依赖。
arXiv stat.MLAI 评分3030 面向解混流的自充分独立成分分析（Self-sufficient ICA）
针对非线性独立成分分析（ICA），研究者提出用于解混流的自充分独立成分分析方法，通过最小化条件 KL 散度学习解耦信号。该算法具备无先验与无似然特性，在每次迭代中序列化学习解混流模型，完全避免了不稳定的对抗训练。实验在玩具和真实数据集上验证了该方法的有效性。
arXiv stat.MLAI 评分3434 面向分布内数据获取的共形数据污染检验
研究人员提出面向分布内数据获取的共形数据污染检验框架，在完全获取数据前仅检查少量样本即可筛选高价值外部数据。该方法基于共形异常值检测构建双样本检验，适用于任意污染水平，其 Storey-type 检验可通过 Benjamini-Hochberg 流程控制有限样本错误发现率。实验表明该方法在多样化协同学习场景下表现稳健，为数据聚合提供了统计质量保证。
arXiv stat.MLAI 评分2727 广义核 t-SNE 的平衡分布研究
该研究探讨了一类广义输入与输出核下 t-SNE 的大样本变分问题，证明了输入核尺度参数在正密度内点的存在性与唯一性。在输出核衰减等充分条件下，离散最优值可收敛至连续极小值，且近似极小值的经验测度平移后收敛于满足平衡方程的紧支撑极小值。适用的输出核包括高斯核及二维输出下的柯西核，数值实验对比了不同核函数生成的二维表示。
arXiv stat.MLAI 评分2727 有限 VC 维神经网络的利与弊
一项研究从高维几何与统计学习理论出发，剖析了有限 VC 维神经网络在逼近能力与样本学习一致性之间的权衡。结果表明，有限 VC 维虽有助于经验误差的一致收敛，但可能不利于特定应用分布下的函数逼近，且在大数据集下逼近误差与经验误差均呈现近似确定性行为。论文还讨论了通用逼近性质的实际局限，以及含 ReLU 单元的网络深度对精度和一致性的影响。
arXiv stat.MLAI 评分2727 线图的 Graphon
稀疏图序列的图极限（graphon）估计可通过将其映射为线图（line graphs）来实现。满足平方度性质的稀疏图（如星图与超线性优先连接图）能生成稠密线图与非零 graphon，从而突破原稀疏图因稀疏性均收敛至零 graphon 的局限。实验表明该方法可有效区分不同数量的星图，而 Erdos-Renyi 等稠密图变换后则会变稀疏并收敛至零 graphon。
arXiv stat.MLAI 评分2828 基于核自编码器与双层优化的数据驱动 Koopman 嵌入学习
研究人员提出 EDMD-kDL 方法，结合配置法与双层优化，利用核自编码器直接从数据中同步学习核字典与有限维 Koopman 嵌入。在海表温度预测和视频数据学习等实验中，该方法性能媲美或优于基于 ANN 的前沿方法。其核矩阵大小仅取决于配置点数量而非训练数据集规模，具备适用大规模数据的扩展能力。
arXiv stat.MLAI 评分3131 消除对抗性 MDP 策略优化中的时界差距
针对带对抗损失与老虎机反馈的在线片段式表格 MDP，新研究利用正则化 Q 函数联合控制局部更新稳定性，消除了策略优化方法相比占用测度算法多出的时界 H 差距。该算法在已知转移下取得 $\widetilde O(\sqrt{HS(H+A)T})$ 的高概率遗憾界，未知转移下达到 $\widetilde O(HS\sqrt{AT})$ 并匹配已知最佳界。
arXiv stat.MLAI 评分2828 具备最优 Oracle 复杂度的复合在线到非凸转换
针对随机非光滑非凸复合优化问题，研究者将在线到非凸转换框架扩展至复合场景，提出了具备最优 Oracle 复杂度的算法。
arXiv stat.MLAI 评分3232 迁移验证：精确信息前沿及其调用代价
该研究针对迁移验证推导了信息与调用代价的精确前沿，证明达成概率 s 所需的最小因果信息由列表率失真函数确定。在精确验证器下，设计源可在 1+\log_2 5 次调用内逼近下界，绝大多数结论已在 Lean 4 中完成机器验证。测试表明小型 Transformer 在潜在维度 5 时利用了全部传输比特，而在维度 11 时则完全无法利用。
arXiv stat.MLAI 评分3333 面向风险规避决策的信度机器学习（Credal Machine Learning）
研究人员提出一种基于信度集（credal sets）的机器学习方法，用于解决真实损失分布不确定时的风险规避决策难题。该方法构建了能输出概率分布集合的高效学习器，并配合新型决策规则将其映射至单一预测分布以最小化条件风险价值（CVaR）。在分类、分布偏移及强化学习测试中，该方案可靠避免了灾难性决策，且几乎不牺牲期望性能。
arXiv stat.MLAI 评分2828 在高计算成本模拟器的贝叶斯推断中利用梯度
研究提出将模拟器输出对输入的梯度信息融入高斯过程代理模型，以加速高计算成本模拟器在有限模拟预算下的贝叶斯优化推断。实验表明引入梯度信息能显著提升收敛速度，且反向模式微分在计入额外计算成本后仍能保持推断效率增益，而前向模式微分的提速无法抵消计算成本。该方法主要适用于参数数量超过输出维度的推断问题。
arXiv stat.MLAI 评分2828 球对称分布的最优随机量化器
研究证明针对球对称目标分布在所有球对称分布上的量化优化属于凸问题，并推导出表征全局最优性与构造性算法的等价定理。在适中点数 $n$ 下，均匀分布在特定半径 $R$ 球面上的随机量化器在广泛范围内经数值验证达到最优，固定维度 $d$ 时失真方差随 $n\to\infty$ 趋于零。在 $s=2$ 条件下最优半径和最小期望失真具备精确解析式，一般 $s$ 亦可高效确定。
arXiv stat.MLAI 评分2929 基于图神经网络与时空追踪数据自动检测足球比赛阶段
新研究提出一种结合图神经网络与时序模型的 GNN-LSTM 框架，利用时空追踪数据逐秒自动分类 7 类足球比赛阶段。在 203 场比赛测试中，该模型表现超越 XGBoost 和纯 LSTM，较最强基线的 macro F1 高出 4.6%。该方案结合德劳内三角剖分与自定义 SEAConv 层捕捉空间依赖，为足球战术分析提供了自动化支持。
arXiv stat.MLAI 评分3434 罕见门控分歧限制模型可塑性：梯度流何时误判有限批次 SGD
研究表明总体梯度流在预测模型可塑性时会定性误判有限批次 SGD，源于长预训练后罕见的门控分歧限制了适应能力。在双单元 ReLU 回归中，梯度流可在目标任务上以线性时间恢复，而在线 SGD 在阶为 $e^{c/\eta}$ 的步数内大概率失败。
arXiv stat.MLAI 评分2727 基于机器学习模型的序贯条件独立性检验
研究者探讨了如何将机器学习模型融入序贯条件独立性检验的 e-变量设计中，并解释了直接检验可交换性在实践中检定力更高的现象。该研究将误差分解为零假设扩大、近似与估计误差，通过引入中间零假设以减少误差。针对 model-X 假设导致的第 I 类错误保证失效问题，论文提供了支持三重稳健性且收敛快速的估计误差界。
arXiv stat.MLAI 评分3434 从几何到泛化：为什么行归一化能击败 Adam 和 Muon
行归一化在高维多分类任务中可取得严格优于全批次 Adam 与精确 SVD Muon 的总体准确率。该优势源于行归一化的类别级欧氏几何在渐近意义下能保留总体决策边界方向，而 Adam 的坐标级几何与 Muon 的谱几何会引入不可消除的失真。合成数据及语言模型最后一层实验均支持了这一理论预测。
arXiv stat.MLAI 评分2525 基于图拉普拉斯基准先验的正则化小区域估计
研究者提出了一种用于小区域估计（SAE）的贝叶斯框架，通过新型基准先验（Benchmarking priors）联合实现跨区域信息借用与基准对齐。该方法包含单视角与多视角拉普拉斯基准先验，利用外部协变量构建图拉普拉斯矩阵引入正则化，并设计了定制 MCMC 算法。在哥伦比亚 2025 年市级平均家庭规模（AHS）估算中，多视角模型有效提升了估计精度。
arXiv stat.MLAI 评分3737 当更低重构损失损害性能：低比特大语言模型量化的分布鲁棒优化
针对训练后量化中更低重构损失反而可能损害模型性能的问题，研究者提出事后优化框架 DRQ（Distributionally Robust Quantization）。
arXiv stat.MLAI 评分2626 决策充分的后验近似
新研究提出了使后验近似保留下游决策问题的理论框架，通过在贝叶斯动作纤维上收缩 KL 散度给出决策充分性的精确距离。在正则有限维问题中，广义特征问题 Gv = γ J_Iv 能按单位信息成本对局部决策方向排序并导出有效维度。该框架将决策覆盖与信息效率分离，为比较和设计受限后验近似族提供了决策相对性准则。
arXiv stat.MLAI 评分2929 小数据脑信号解码只需 SPD-MetaFormer
研究团队提出面向小数据脑信号解码的无注意力架构 SPD-MetaFormer，基于对数欧氏几何下的均匀加权 Fréchet 聚合构建。该研究发现现有对称正定（SPD）流形注意力模型的权重训练后接近均匀分布，直接改用均匀权重对性能几乎没有影响。在 3 个 EEG 基准上，SPD-MetaFormer 取得了相比欧氏与流形基线极具竞争力的表现。
arXiv stat.MLAI 评分2727 对抗训练神经网络显著图稀疏性的理论解释
新研究针对两层 ReLU 网络提出理论解释，揭示了对抗训练神经网络梯度显著图呈现稀疏性的成因。研究表明，在 $\ell_\infty$ 攻击对抗训练下梯度范数具有各向异性并偏向轴对齐与稀疏梯度，其极小值会收敛至具备极小梯度与 Barron 范数的 Bayes 分类器。团队通过评估模型的梯度 $\ell_1$ 范数和阈值化稀疏性，实验验证了这一结论。
arXiv stat.MLAI 评分3232 截断扩散采样器需保留多少方向？幂律谱下的匹配界
该研究针对幂律协方差谱数据，证明了截断扩散采样器所需保留方向数量的匹配界。研究表明截断误差取决于被省略方向的维纳增益总和，仅保留信号强于输出噪声的方向仍会因弱方向的聚合效应而残留显著误差。该理论上界可拓展至估计主成分及高斯混合模型，建议在实践中依据聚合谱尾误差预算来选择保留子空间并设定扩散噪声水平。
arXiv stat.MLAI 评分3535 D-SLR：互斥行稀疏加低秩矩阵分解
D-SLR 提出了一种互斥行稀疏加低秩矩阵分解方法，作为截断 SVD 的闭式替代方案，将行严格限定为完整存储或低秩近似，在同等或更少参数下表现不逊于 SVD。该算法无需迭代求解与正则化调优，计算总成本仅需 3 次 SVD，并提供免假设的事后误差下界保证。在 LLM 嵌入向量表、网络流量及高光谱图像等数据上的实验验证了其性能增益。
最多提供 50 页，更早的内容请使用搜索或主题页。