Un modelo devuelve la probabilidad de fraude. Subes el umbral de decisión de 0,5 a 0,8. ¿Qué suele pasar?
Opciones
- Sube la precisión y baja el recall (Opción correcta)
- Baja la precisión y sube el recall
- Suben tanto la precisión como el recall
- No cambia nada, porque el ROC-AUC no depende del umbral
Respuesta
Sube la precisión y baja el recall
Por qué
Un umbral más alto significa que el modelo marca menos casos, y solo aquellos de los que está más seguro. Normalmente eso da menos falsos positivos (más precisión) y más positivos que se escapan (menos recall). El F1 se mueve según cuál de los dos efectos pese más.
El ROC-AUC no depende del umbral, pero la precisión, el recall, el F1 y la matriz de confusión sí.
Elige el umbral según el coste de cada error, no por defecto en 0,5.
Recuerda
Umbral más alto: sube la precisión, baja el recall.