过度拟合和ROC曲线

Question

仅通过查看其ROC曲线就可以了解分类器是否过度配置？ 我看到如果它的AUC过高（例如98％）可能会过度配置，但它也可能意味着分类器非常好。有没有办法将这两种情况区分开来？

Answer 1

简答：不，你不能。

长答案：要估计过度拟合，您需要在独立数据集上评估模型。或者使用交叉验证或类似的东西。