arXiv cs.LG· Soumyadeep Roy·· 2026-10-03AI 评分37
99% 准确率的隐形成本：IBM Telco 客户流失基准的可信度审计
The Hidden Costs of 99% Accuracy: A Trustworthiness Audit of the Telco Customer Churn Benchmark
AI 导读
针对常报告超 95% 准确率的 IBM Telco 客户流失基准，一项审计研究揭示了传统准确率与 F1 指标掩盖的多项缺陷。实验发现划分前使用 SMOTE 会使流失类 F1 虚高 13.1 个百分点；在 50 USD 挽留方案下，成本最优决策阈值比 F1 最优低 5-10 倍，每 1,000 名客户可节省约 77,000 USD。研究据此提出了四要素报告清单并发布了可复现代码。
来源：arXiv cs.LG · arxiv.org