arXiv stat.ML· Dmytro Knopov, Nadiya Shvai·· 15 天前AI 评分40
随机机器学习实验的等效性检验与运行次数设计
Equivalence testing and run-count design for stochastic machine-learning experiments
AI 导读
针对机器学习训练中仅凭两三次运行无法严谨证明方法等效的问题，研究人员提出了一套用于验证 AUROC 等指标实际等效性的检验方案与功效理论。该方案基于区分运行间分散度与样本级噪声的两层方差模型，采用双单侧检验（TOST）及两层 Bootstrap，并给出将等效裕度与目标功效转换为每种方法所需运行次数的闭式公式。
来源：arXiv stat.ML · arxiv.org