Un clasificador binario tiene un ROC-AUC de 0,5. ¿Qué significa?
Opciones
- Su exactitud es siempre exactamente del 50 %
- La mitad de sus predicciones son erróneas
- Sus probabilidades están perfectamente calibradas
- Ordena los ejemplos igual que el azar: un positivo al azar puntúa por encima de un negativo al azar la mitad de las veces (Opción correcta)
Respuesta
Ordena los ejemplos igual que el azar: un positivo al azar puntúa por encima de un negativo al azar la mitad de las veces
Por qué
El ROC-AUC es la probabilidad de que el modelo dé una puntuación más alta a un positivo al azar que a un negativo al azar. 0,5 es lanzar una moneda, 1,0 es un orden perfecto, y por debajo de 0,5 el orden está invertido.
La exactitud depende del umbral y del balance de clases, así que un AUC de 0,5 no la fija en el 50 %.
El AUC no dice nada sobre la calibración.
Recuerda
AUC 0,5 = orden aleatorio.