6. MLOps y AB Testing
Objetivo
Desplegar modelos con seguridad, monitorear runtime y comparar variantes con AB testing.
Crear deployment
Abrir
MLOps > Deployments.Seleccionar version de modelo.
Configurar: - Ambiente. - Perfil de replicas/compute. - Estrategia de rollback.
Ejecutar despliegue y esperar estado
active.
Monitorear deployment
Validar indicadores de salud: - Uptime/health. - Error rate. - Latencia.
Ejecutar inferencia de prueba y validar respuesta.
Revisar logs recientes para excepciones.
Ejecutar AB test
Abrir
MLOps > A/B Tests.Crear test con: - Modelo baseline (A). - Modelo candidato (B). - Split de trafico. - Metrica principal. - Tamano minimo de muestra y duracion.
Iniciar test y monitorear asignacion.
Evaluar ganador cuando se cumpla criterio.
Checklist de validacion funcional
Deployment activo responde sin downtime.
Salud y metricas actualizan en tiempo operativo.
Split AB se refleja en conteo real de requests.
Ganador reportado coincide con metrica definida.
Rollback disponible ante degradacion.
Resultado esperado
Ruta productiva estable y observable.
Promocion de modelos basada en datos.
Errores comunes y recuperacion
Deployment en
pending: - Revisar capacidad y artifact del modelo.Error rate alto post-release: - Ejecutar rollback inmediato.
Test AB inconcluso: - Aumentar tiempo o muestra.
Imagenes
Lista de deployments y estado runtime.
Configuracion y comparativa en AB testing.