Un auditor pregunta qué datos y qué código produjeron el modelo que estaba en producción el 3 de marzo. ¿Qué necesitas haber guardado?
Opciones
- Solo el número de exactitud final
- Una captura de pantalla del panel de control
- Una entrada del registro que enlace cada versión del modelo con su commit de código, su foto de datos, sus parámetros, sus resultados de evaluación y el historial de despliegues (Opción correcta)
- El portátil del científico de datos
Respuesta
Una entrada del registro que enlace cada versión del modelo con su commit de código, su foto de datos, sus parámetros, sus resultados de evaluación y el historial de despliegues
Por qué
El linaje (lineage) es la cadena rastreable desde el modelo en producción hasta sus fuentes. Sin él no se pueden responder preguntas como "¿qué modelo estaba activo el 3 de marzo?" o "¿con qué se entrenó?".
Guardar este registro automáticamente en el pipeline y en el registro de modelos es mucho más fiable que intentar reconstruirlo después.
También ayuda en los incidentes, para saber qué otros modelos usaron los mismos datos.
Recuerda
Guarda el linaje: del modelo al código, los datos y los parámetros.