arXiv 机器学习· Soumyadeep Roy·· 3 小时前AI 评分38
99% 准确率的隐形成本：Telco 客户流失预测基准可信度审计
The Hidden Costs of 99% Accuracy: A Trustworthiness Audit of the Telco Customer Churn Benchmark
AI 导读
一项针对 IBM Telco 客户流失基准的可信度审计显示，文献中高达 99.01% 的准确率存在评估失效，如数据划分前应用 SMOTE 会使流失类 F1 虚增 13.1 个百分点。在 50 USD 挽留方案下，成本最优决策阈值比 F1 最优阈值低约 5-10 倍，每 1,000 名客户可节省约 77,000 USD。研究据此提出了四要素报告清单并发布了可复现实现。
来源：arXiv 机器学习 · arxiv.org