¿El curso cubre modelos tradicionales y generativos?

Sí. Incluye modelos predictivos, analíticos, reglas, optimización, LLMs, RAG, embeddings, agentes y sistemas de decisión automatizada.

¿Se trabaja monitorización de modelos?

Sí. Hay bloques sobre rendimiento, drift, calidad de datos, sesgo, latencia, coste, errores, observabilidad y dashboards.

¿Incluye model registry?

Sí. Se trabaja model registry, versionado, estados del modelo, linaje, aprobación, promoción, rollback y retirada.

¿Se ven herramientas concretas?

Sí. Se comentan herramientas como MLflow, Kubeflow, SageMaker, Vertex AI, Azure Machine Learning, Databricks y plataformas equivalentes, según el entorno del cliente.

¿Incluye Responsible AI?

Sí. Se abordan sesgo, fairness, explicabilidad, intervención humana, usos prohibidos, documentación, privacidad y modelos de alto impacto.

Sí. Incluye prompts, versiones, evaluaciones, tokens, costes, seguridad, hallucinations, guardrails, proveedores, trazabilidad y monitorización.

Sí. Se trabaja operación de documentos, embeddings, chunking, bases vectoriales, retrieval, fuentes, permisos, groundedness y reindexación.

¿Sirve para áreas de riesgo y compliance?

Sí. El curso está pensado para conectar equipos técnicos con riesgo, auditoría, cumplimiento, legal y negocio.

¿Se aborda coste de modelos?

Sí. Incluye FinOps de modelos: entrenamiento, inferencia, GPUs, endpoints, APIs LLM, tokens, almacenamiento, monitorización y coste por caso de uso.

¿El curso requiere programar?

Depende del perfil. Puede tener enfoque técnico con Python, pipelines y despliegue, o enfoque de gobierno y operación para perfiles de negocio/riesgo.

¿Esta formación puede bonificarse por FUNDAE?

Sí, puede plantearse como formación bonificable hasta el 100% por FUNDAE para empresas, siempre que se cumplan los requisitos administrativos, comunicación, asistencia y documentación.

Curso de ModelOps (Model Operations)

Aprende con el curso de ModelOps (Model Operations) para empresas hasta 100% bonificado, a medida para tu organización.

Totalmente práctico y aplicable

Formación en ModelOps (Model Operations) a medida

100% bonificable a través de FUNDAE

Curso TUTORIZADO por expertos

Solicitar precio

Me interesa

Calcula mis créditos de FUNDAE

Solicitar precio

Calcula mis créditos de FUNDAE

Programa formativo

Temario del curso

Encuentra todo el temario del curso aquí.

Temario

Explicar qué es ModelOps y por qué resulta clave cuando una organización empieza a escalar modelos en producción.
Diferenciar ModelOps, MLOps, LLMOps, DataOps, DevOps, AIOps, Responsible AI y gobierno de modelos.
Entender que ModelOps no termina en desplegar modelos, sino que cubre gobierno, riesgo, valor, monitorización y retirada.
Revisar tipos de modelos incluidos: machine learning, analítica, reglas, optimización, modelos generativos, RAG y agentes.
Analizar problemas habituales: modelos sin owner, sin métricas, sin linaje, sin monitorización o sin proceso de retirada.
Presentar el ciclo completo: ideación, datos, entrenamiento, validación, registro, aprobación, despliegue, operación y mejora.
Identificar roles implicados: data scientist, ML engineer, plataforma, negocio, riesgo, seguridad, legal, IT y dirección.
Diferenciar prueba de concepto, piloto, modelo productivo, modelo crítico y sistema automatizado de decisión.
Revisar riesgos de modelos en producción: drift, sesgo, degradación, coste, latencia, errores y decisiones incorrectas.
Crear checklist inicial de madurez ModelOps para evaluar el punto de partida de la empresa.

Explicar qué es ModelOps y por qué resulta clave cuando una organización empieza a escalar modelos en producción.
Diferenciar ModelOps, MLOps, LLMOps, DataOps, DevOps, AIOps, Responsible AI y gobierno de modelos.
Entender que ModelOps no termina en desplegar modelos, sino que cubre gobierno, riesgo, valor, monitorización y retirada.
Revisar tipos de modelos incluidos: machine learning, analítica, reglas, optimización, modelos generativos, RAG y agentes.
Analizar problemas habituales: modelos sin owner, sin métricas, sin linaje, sin monitorización o sin proceso de retirada.
Presentar el ciclo completo: ideación, datos, entrenamiento, validación, registro, aprobación, despliegue, operación y mejora.
Identificar roles implicados: data scientist, ML engineer, plataforma, negocio, riesgo, seguridad, legal, IT y dirección.
Diferenciar prueba de concepto, piloto, modelo productivo, modelo crítico y sistema automatizado de decisión.
Revisar riesgos de modelos en producción: drift, sesgo, degradación, coste, latencia, errores y decisiones incorrectas.
Crear checklist inicial de madurez ModelOps para evaluar el punto de partida de la empresa.

¿Tienes dudas?

Estamos aquí para ayudarte

Reservar plaza

Tema 1: Presentación, dudas principales y primeros pasos con ModelOps

Explicar qué es ModelOps y por qué resulta clave cuando una organización empieza a escalar modelos en producción.
Diferenciar ModelOps, MLOps, LLMOps, DataOps, DevOps, AIOps, Responsible AI y gobierno de modelos.
Entender que ModelOps no termina en desplegar modelos, sino que cubre gobierno, riesgo, valor, monitorización y retirada.
Revisar tipos de modelos incluidos: machine learning, analítica, reglas, optimización, modelos generativos, RAG y agentes.
Analizar problemas habituales: modelos sin owner, sin métricas, sin linaje, sin monitorización o sin proceso de retirada.
Presentar el ciclo completo: ideación, datos, entrenamiento, validación, registro, aprobación, despliegue, operación y mejora.
Identificar roles implicados: data scientist, ML engineer, plataforma, negocio, riesgo, seguridad, legal, IT y dirección.
Diferenciar prueba de concepto, piloto, modelo productivo, modelo crítico y sistema automatizado de decisión.
Revisar riesgos de modelos en producción: drift, sesgo, degradación, coste, latencia, errores y decisiones incorrectas.
Crear checklist inicial de madurez ModelOps para evaluar el punto de partida de la empresa.

Tema 2: ModelOps frente a MLOps, LLMOps y gobierno de IA

Comparar ModelOps con MLOps, aclarando que MLOps se centra más en ingeniería y ciclo técnico de ML.
Explicar cómo ModelOps amplía el foco hacia gobierno empresarial, riesgo, inventario, compliance y valor de negocio.
Diferenciar LLMOps como operación de modelos generativos, prompts, RAG, agentes, evaluaciones y costes de inferencia.
Relacionar ModelOps con Responsible AI, gestión de riesgo, seguridad, auditoría y explicabilidad.
Identificar cuándo un modelo debe entrar en un proceso formal de gobierno.
Entender que no todos los modelos requieren el mismo nivel de control, pero todos necesitan ownership.
Analizar el papel de negocio en validación, seguimiento y aceptación del rendimiento del modelo.
Revisar cómo DevOps aporta automatización, CI/CD, infraestructura y operación, pero no cubre por sí solo el riesgo del modelo.
Crear un mapa de disciplinas y responsabilidades para evitar solapamientos o vacíos de control.
Taller: clasificar modelos de una organización según enfoque MLOps, LLMOps, ModelOps y gobierno.

Tema 3: Estrategia corporativa de ModelOps

Definir objetivos de ModelOps: escalar IA, reducir riesgo, acelerar despliegues, mejorar trazabilidad y aumentar valor.
Identificar modelos críticos por impacto económico, regulatorio, reputacional, operativo o humano.
Crear criterios para priorizar qué modelos deben gobernarse primero.
Diseñar un modelo operativo con roles, responsabilidades, herramientas, aprobaciones y métricas.
Definir niveles de criticidad: experimental, interno, operativo, crítico, regulado o automatizado.
Establecer políticas mínimas por nivel: documentación, validación, monitorización, revisión y retirada.
Conectar ModelOps con estrategia de datos, plataforma, cloud, seguridad y transformación digital.
Evitar que cada equipo cree su propio proceso de modelos sin estándares comunes.
Crear una hoja de ruta a 90 días para implantar ModelOps de forma progresiva.
Taller: diseñar estrategia ModelOps para una empresa con múltiples modelos en distintas áreas.

Tema 4: Inventario y catálogo de modelos

Crear inventario corporativo de modelos con nombre, owner, área, propósito, datos, versión y estado.
Registrar modelos en desarrollo, producción, retirados, en revisión, en piloto o en uso informal.
Diferenciar modelos técnicos, modelos de negocio, modelos embebidos en herramientas SaaS y modelos externos.
Incluir metadatos clave: criticidad, usuarios afectados, métricas, fecha de entrenamiento, aprobaciones y riesgos.
Gestionar modelos duplicados o solapados que resuelven el mismo problema en distintas áreas.
Identificar modelos “shadow AI” creados sin gobierno, documentación o validación.
Crear un catálogo consultable para negocio, IT, riesgo, auditoría y equipos técnicos.
Vincular modelos con datasets, pipelines, endpoints, dashboards, documentación y sistemas consumidores.
Revisar periódicamente modelos sin uso, obsoletos o sin responsable activo.
Taller: diseñar ficha de inventario de modelos y matriz de criticidad.

Tema 5: Model Registry, versionado y linaje

Explicar qué es un model registry y por qué es imprescindible para operar modelos a escala.
Registrar versiones de modelos, artefactos, métricas, parámetros, datasets, código y fecha de entrenamiento.
Diferenciar versión de experimento, versión candidata, versión aprobada y versión productiva.
Gestionar estados del modelo: draft, validated, approved, staged, production, deprecated y retired.
Trazar linaje desde datos de entrenamiento hasta modelo, endpoint, predicción y decisión final.
Relacionar registry con experiment tracking, CI/CD, pipelines, monitorización y auditoría.
Evitar despliegues de modelos no registrados o sin versión reproducible.
Documentar qué versión está activa en cada entorno y qué cambio introdujo.
Preparar rollback a versiones anteriores con evidencia de validación.
Taller: diseñar flujo de registro y promoción de modelos desde experimento hasta producción.

Tema 6: Experiment tracking y reproducibilidad

Registrar experimentos con parámetros, métricas, datasets, código, entorno y artefactos generados.
Comparar ejecuciones para seleccionar candidatos de modelo con criterios técnicos y de negocio.
Controlar semillas, dependencias, versiones de librerías y configuraciones de entrenamiento.
Evitar notebooks sueltos sin trazabilidad ni posibilidad de reproducir resultados.
Gestionar versiones de datasets de entrenamiento, validación y test.
Registrar métricas de entrenamiento junto a métricas de validación fuera de muestra.
Vincular experimentos con issues, pull requests, decisiones y documentación.
Preparar experimentos para auditoría o revisión por otros equipos.
Diferenciar métricas exploratorias de métricas oficiales de aprobación.
Taller: estructurar un experimento reproducible y listo para ModelOps.

Tema 7: Gestión de datos, datasets y feature stores

Identificar qué datos alimentan cada modelo y quién es responsable de su calidad.
Versionar datasets de entrenamiento, validación, test y producción.
Controlar cambios de esquema, distribución, valores nulos, outliers y reglas de negocio.
Explicar el papel del feature store en reutilización, consistencia y gobierno de variables.
Diferenciar features offline, online, calculadas en batch y calculadas en tiempo real.
Detectar feature leakage, variables prohibidas o fuentes no autorizadas.
Alinear definiciones de features entre entrenamiento e inferencia.
Monitorizar calidad de datos de entrada en producción.
Documentar linaje de features, fuentes, transformaciones y propietarios.
Taller: diseñar catálogo de features y controles de calidad para un modelo crítico.

Tema 8: Validación técnica de modelos

Definir métricas adecuadas según problema: clasificación, regresión, ranking, forecasting, clustering o recomendación.
Separar métricas de entrenamiento, validación, test, producción y negocio.
Evaluar precisión, recall, F1, ROC-AUC, MAE, RMSE, MAPE, calibration, lift o métricas personalizadas.
Analizar estabilidad del modelo por segmentos, regiones, canales, productos o perfiles.
Validar robustez frente a outliers, datos faltantes, cambios de distribución y escenarios límite.
Comparar modelo nuevo frente a baseline, modelo anterior y reglas actuales de negocio.
Definir umbrales mínimos de aceptación antes de promover un modelo.
Documentar limitaciones, supuestos, errores conocidos y condiciones de uso.
Evitar aprobar modelos solo por métrica global sin revisar segmentos críticos.
Taller: crear checklist de validación técnica para modelos de scoring o predicción.

Tema 9: Validación de negocio y aceptación operativa

Traducir métricas técnicas a impacto de negocio: ahorro, ingresos, riesgo, eficiencia, satisfacción o reducción de errores.
Definir criterios de aceptación con usuarios de negocio antes del despliegue.
Evaluar consecuencias de falsos positivos, falsos negativos y decisiones erróneas.
Diseñar pruebas piloto con usuarios, procesos y datos representativos.
Validar que el modelo se integra en el flujo real de trabajo.
Revisar explicaciones, umbrales, acciones recomendadas y responsabilidad final.
Medir adopción y confianza de usuarios en las salidas del modelo.
Documentar decisiones de aceptación, rechazo o despliegue limitado.
Evitar modelos técnicamente buenos que no encajan en el proceso operativo.
Taller: diseñar plan de aceptación de negocio para un modelo de alto impacto.

Tema 10: Model Cards, documentación y evidencia

Crear model cards con propósito, datos, métricas, limitaciones, riesgos, owners y usos permitidos.
Documentar audiencia, decisiones afectadas, supuestos, restricciones y condiciones de uso.
Incluir métricas por segmento, sesgos detectados, validaciones realizadas y resultados de pruebas.
Registrar versión, fecha, responsable, aprobadores y entorno de despliegue.
Documentar datasets, features, transformaciones, dependencias y linaje.
Preparar documentación útil para IT, negocio, auditoría, riesgo y equipos de soporte.
Evitar documentación decorativa que no sirve para operar ni auditar.
Crear evidencias de pruebas, aprobaciones, revisiones y cambios.
Mantener documentación sincronizada con el registry y pipelines.
Taller: crear model card completa para un modelo productivo.

Tema 11: Despliegue de modelos: batch, online, streaming y edge

Diferenciar despliegue batch, online, streaming, embedded y edge.
Diseñar APIs de inferencia para modelos que responden en tiempo real.
Crear procesos batch para scoring masivo, forecasting o generación periódica de resultados.
Evaluar despliegue en streaming para eventos de baja latencia.
Analizar despliegue edge cuando los datos o la latencia impiden centralizar inferencia.
Definir contratos de entrada y salida del modelo.
Controlar escalabilidad, latencia, concurrencia, timeout y disponibilidad.
Gestionar compatibilidad entre versión de modelo, features y consumidores.
Registrar cada predicción con metadatos suficientes para trazabilidad.
Taller: seleccionar estrategia de despliegue para varios modelos corporativos.

Tema 12: Serving, APIs y arquitectura de inferencia

Diseñar servicios de inferencia con endpoints, autenticación, validación y logging.
Separar capa de modelo, capa de negocio, capa de API y capa de monitorización.
Controlar serialización, formatos JSON, protobuf, archivos, imágenes o embeddings.
Gestionar errores de entrada, valores inesperados, timeouts y respuestas parciales.
Diseñar inferencia síncrona y asíncrona según caso de uso.
Añadir trazabilidad por request_id, model_version, usuario, aplicación y decisión.
Preparar endpoints para health checks, metadata, versionado y explainability.
Evitar acoplar consumidores a detalles internos del modelo.
Medir latencia, throughput, errores, saturación y coste por predicción.
Taller: diseñar API de inferencia preparada para operación y auditoría.

Tema 13: CI/CD y Continuous Training para modelos

Adaptar CI/CD a modelos, datasets, pipelines, features y artefactos.
Automatizar pruebas de código, datos, features, modelo, empaquetado y despliegue.
Diseñar gates de calidad antes de promover un modelo.
Incorporar Continuous Training cuando cambian datos, rendimiento o necesidades de negocio.
Separar entrenamiento automático de despliegue automático en modelos críticos.
Crear pipelines reproducibles con validación, registro, aprobación y publicación.
Gestionar rollback de código, modelo, features y configuración.
Evitar pipelines que despliegan modelos sin validación humana cuando el riesgo lo exige.
Medir tiempo desde experimento aprobado hasta producción.
Taller: diseñar pipeline CI/CD/CT para un modelo de clasificación en producción.

Tema 14: Estrategias de despliegue seguro

Aplicar shadow deployment para comparar un modelo nuevo sin afectar decisiones reales.
Usar canary release para exponer el modelo a un pequeño porcentaje de tráfico.
Diseñar A/B testing cuando el objetivo es comparar impacto de negocio.
Aplicar blue/green deployment para reducir riesgo de cambio.
Definir rollback automático o manual según métrica, error, latencia o feedback.
Registrar diferencias entre predicciones del modelo anterior y nuevo.
Evitar sustituir modelos críticos sin fase de observación.
Diseñar aprobaciones antes de ampliar exposición.
Controlar sesgo y degradación durante el despliegue progresivo.
Taller: plan de despliegue canary para un modelo de riesgo medio.

Tema 15: Monitorización de rendimiento del modelo

Monitorizar métricas técnicas: latencia, errores, throughput, disponibilidad y saturación.
Monitorizar métricas de modelo: accuracy, recall, precision, calibration, error rate o métricas específicas.
Diferenciar performance inmediata, performance diferida y performance con etiquetas tardías.
Diseñar dashboards para data science, operaciones, negocio, riesgo y dirección.
Comparar rendimiento actual con baseline, modelo anterior y umbrales de aceptación.
Identificar degradación por segmentos, cohortes, canales, regiones o productos.
Gestionar casos donde el ground truth llega días o semanas después.
Crear alertas accionables cuando un modelo baja de rendimiento.
Evitar alertas basadas en métricas que no pueden calcularse con datos disponibles.
Taller: diseñar dashboard de rendimiento para modelo productivo.

Tema 16: Data drift, concept drift y model decay

Diferenciar data drift, feature drift, prediction drift, concept drift y model decay.
Detectar cambios en distribución de datos de entrada.
Comparar datos de producción frente a entrenamiento, validación o ventana de referencia.
Analizar drift por segmentos para evitar ocultar problemas en métricas globales.
Entender cuándo drift implica riesgo y cuándo es un cambio esperado del negocio.
Crear umbrales, tests estadísticos y alertas de drift con revisión humana.
Relacionar drift con eventos externos, campañas, cambios de producto o incidencias de datos.
Definir acciones ante drift: investigar, recalibrar, reentrenar, ajustar features o retirar modelo.
Evitar reentrenar automáticamente sin entender la causa.
Taller: analizar escenario de drift y decidir respuesta operativa.

Tema 17: Monitorización de datos y calidad de entrada

Validar esquemas, tipos, rangos, nulos, outliers, categorías nuevas y valores imposibles.
Detectar cambios de frecuencia, duplicados, retrasos, datos incompletos o pipelines fallidos.
Revisar calidad de features online frente a features usadas en entrenamiento.
Crear reglas de validación antes de llamar al modelo.
Definir comportamiento ante datos inválidos: rechazar, imputar, escalar, usar fallback o registrar error.
Monitorizar latencia de datos en procesos batch y streaming.
Crear dashboards de salud de datos para modelos críticos.
Coordinar incidencias de datos con DataOps y equipos propietarios.
Documentar impactos de mala calidad de datos en decisiones del modelo.
Taller: crear reglas de calidad de entrada para servicio de inferencia.

Tema 18: Observabilidad de modelos en producción

Correlacionar logs, métricas, trazas, predicciones, versiones y datos de entrada.
Registrar model_version, feature_set, request_id, usuario, canal, entorno y resultado.
Diseñar logs de predicción que permitan auditoría sin exponer datos sensibles.
Usar trazas para seguir una decisión desde la petición hasta el modelo y sistemas posteriores.
Monitorizar errores de dependencia, servicios de features, bases de datos y endpoints externos.
Crear alertas por latencia, tasa de error, drift, coste o falta de datos.
Integrar observabilidad con herramientas cloud, OpenTelemetry, Prometheus, Grafana o plataformas MLOps.
Evitar cajas negras operativas donde el modelo falla sin evidencia.
Preparar vistas para soporte, data science, operaciones y negocio.
Taller: diseñar trazabilidad completa de una predicción.

Tema 19: Gestión de incidentes de modelo

Definir qué es un incidente de modelo: error técnico, degradación, sesgo, drift, mal dato o impacto de negocio.
Clasificar severidad según clientes afectados, decisiones erróneas, impacto financiero o riesgo regulatorio.
Crear runbooks para caída de endpoint, drift elevado, sesgo detectado, coste anómalo o rendimiento degradado.
Definir roles durante incidente: data scientist, MLOps, negocio, riesgo, soporte, seguridad y comunicación.
Ejecutar mitigaciones: rollback, fallback, desactivación, umbral manual, reentrenamiento o revisión humana.
Registrar timeline, señales, decisiones, versiones afectadas y acciones aplicadas.
Comunicar impacto con lenguaje comprensible para negocio.
Preparar postmortems sin culpa con acciones correctoras.
Evitar ocultar incidentes de modelo porque el sistema “sigue funcionando”.
Taller: simular incidente por drift y diseñar respuesta operativa.

Tema 20: Retraining, recalibración y actualización continua

Definir cuándo reentrenar: drift, degradación, nuevos datos, cambios de negocio o nueva regulación.
Diferenciar reentrenamiento completo, incremental, recalibración y ajuste de umbrales.
Diseñar triggers de retraining basados en métricas, calendario, volumen o validación humana.
Controlar que un modelo reentrenado no empeore segmentos críticos.
Mantener datos de referencia, datasets de comparación y pruebas de regresión.
Automatizar pipeline de retraining con revisión y aprobación antes de producción.
Evitar retraining automático sin control en modelos regulados o de alto impacto.
Documentar cambios entre versiones y razones de actualización.
Retirar modelos antiguos de forma ordenada tras confirmación.
Taller: diseñar política de retraining para varios tipos de modelo.

Tema 21: Gobierno de riesgo y compliance

Clasificar modelos por criticidad, impacto, regulación, automatización y exposición externa.
Definir controles mínimos para modelos de bajo, medio y alto riesgo.
Crear procesos de aprobación técnica, negocio, riesgo, legal y seguridad.
Registrar evidencias de validación, pruebas, métricas, documentación y decisiones.
Auditar cambios de modelo, datos, features, código, umbrales y consumidores.
Gestionar revisiones periódicas de modelos productivos.
Aplicar controles de privacidad, minimización, retención y finalidad de datos.
Integrar ModelOps con GRC, auditoría interna, compliance y gestión de riesgos.
Preparar informes ejecutivos sobre estado, riesgo y salud de modelos.
Taller: crear matriz de riesgo y controles para catálogo de modelos.

Tema 22: Responsible AI, sesgo y explicabilidad

Identificar riesgos de sesgo, discriminación, falta de transparencia y uso indebido.
Evaluar rendimiento por segmentos sensibles o grupos de negocio relevantes.
Aplicar métricas de fairness cuando el caso lo requiere.
Diseñar explicaciones locales y globales según usuario, regulador o responsable de negocio.
Diferenciar interpretabilidad técnica y explicación útil para una decisión.
Registrar límites, usos prohibidos, advertencias y condiciones de revisión humana.
Evitar que explicabilidad sea un documento aislado sin conexión con operación.
Monitorizar sesgo y comportamiento desigual tras despliegue.
Definir intervención humana en decisiones de impacto relevante.
Taller: evaluar sesgo y explicabilidad en un modelo de scoring ficticio.

Tema 23: Seguridad, privacidad y protección de modelos

Proteger endpoints de inferencia con autenticación, autorización, rate limiting y logging.
Evitar exposición de modelos, features, datos de entrenamiento o respuestas sensibles.
Gestionar ataques de model extraction, data leakage, prompt injection y adversarial examples.
Proteger artefactos de modelo, registry, datasets, pipelines y secretos.
Controlar accesos a modelos según rol, entorno y criticidad.
Revisar privacidad en logs de predicción y datos de entrada.
Aplicar cifrado, red privada, gestión de claves y retención limitada.
Auditar accesos y cambios sobre modelos productivos.
Preparar respuesta ante filtración de modelo o datos asociados.
Taller: diseñar controles de seguridad para API de inferencia.

Tema 24: ModelOps para IA generativa y LLMOps

Diferenciar operación de modelos tradicionales y operación de LLMs.
Registrar prompts, plantillas, modelos, proveedores, versiones, parámetros y herramientas invocadas.
Monitorizar coste, tokens, latencia, errores, calidad de respuesta y tasa de fallback.
Gestionar evaluaciones automáticas y revisión humana de respuestas generativas.
Controlar safety, toxicidad, groundedness, alucinaciones, jailbreaks y prompt injection.
Diseñar versionado de prompts, datasets de evaluación y criterios de aprobación.
Registrar trazabilidad de respuesta: prompt, contexto, herramientas, modelo, versión y usuario.
Gestionar límites de uso, privacidad, proveedores externos y datos sensibles.
Aplicar guardrails antes, durante y después de la generación.
Taller: diseñar operación ModelOps para un asistente generativo corporativo.

Tema 25: ModelOps para RAG, embeddings y bases vectoriales

Gestionar el ciclo de vida de sistemas RAG: documentos, chunks, embeddings, índice y modelo generativo.
Versionar datasets documentales, estrategia de chunking, modelo de embeddings y base vectorial.
Monitorizar retrieval: documentos recuperados, relevancia, fuentes, cobertura y consultas sin respuesta.
Detectar drift documental, contenido obsoleto, permisos incorrectos o fuentes no autorizadas.
Evaluar groundedness, citas, precisión factual y respuesta ante falta de evidencia.
Gestionar reindexación, borrado, actualización y control de versiones de conocimiento.
Controlar seguridad por metadatos, permisos, tenant, cliente o área.
Registrar trazabilidad de pregunta, contexto recuperado, respuesta y feedback.
Diseñar dashboards de calidad, uso, coste y errores de RAG.
Taller: crear plan ModelOps para un sistema RAG interno.

Tema 26: ModelOps para agentes y sistemas de decisión

Definir qué debe gobernarse en agentes: modelo, herramientas, memoria, reglas, permisos y objetivos.
Registrar acciones ejecutadas por agentes, herramientas invocadas, decisiones y resultados.
Controlar permisos de herramientas, APIs y sistemas corporativos.
Diseñar límites, confirmaciones y revisión humana en acciones de impacto.
Monitorizar loops, errores, coste, latencia, uso de herramientas y decisiones fallidas.
Evaluar agentes con escenarios, tareas, criterios de éxito y pruebas de regresión.
Gestionar memoria persistente, actualización, borrado, privacidad y trazabilidad.
Evitar agentes autónomos sin auditoría ni capacidad de intervención.
Integrar agentes con ITSM, workflows, plataformas y sistemas de negocio.
Taller: diseñar gobierno operativo para agente corporativo con herramientas.

Tema 27: Plataformas y herramientas ModelOps

Revisar herramientas para registry, experiment tracking, pipelines, serving, monitoring y governance.
Comparar MLflow, Kubeflow, SageMaker, Vertex AI, Azure Machine Learning, Databricks, DataRobot o plataformas equivalentes.
Analizar herramientas de model monitoring, data quality, feature store, lineage y catalogación.
Diseñar arquitectura independiente del proveedor cuando la empresa trabaja multicloud.
Evaluar cuándo conviene plataforma gestionada y cuándo construir componentes propios.
Integrar herramientas ModelOps con Git, CI/CD, contenedores, observabilidad, ITSM y seguridad.
Evitar proliferación de herramientas sin gobierno ni interoperabilidad.
Crear criterios de selección: madurez, coste, regulación, escalabilidad, integración y experiencia del equipo.
Diseñar stack mínimo viable ModelOps para distintos niveles de madurez.
Taller: seleccionar arquitectura de herramientas para tres escenarios corporativos.

Tema 28: Costes, capacidad y FinOps de modelos

Medir costes de entrenamiento, inferencia, almacenamiento, GPUs, APIs externas, vector DBs y monitorización.
Diferenciar coste por predicción, coste por usuario, coste por caso de uso y coste por modelo.
Controlar recursos infrautilizados, endpoints encendidos sin tráfico y jobs mal programados.
Optimizar batch frente a online según necesidad de latencia.
Estimar coste de LLMs por tokens, contexto, herramientas, embeddings y reintentos.
Crear presupuestos, alertas y reporting por equipo, producto o modelo.
Relacionar coste con valor de negocio, reducción de riesgo o eficiencia generada.
Evitar que pruebas de IA escalen a costes productivos sin control.
Incorporar FinOps en decisiones de retraining, serving y monitorización.
Taller: diseñar dashboard de coste y valor para cartera de modelos.

Tema 29: Adopción, cambio organizativo y cultura ModelOps

Definir cómo cambia el trabajo de data science al operar modelos como productos vivos.
Crear colaboración entre data science, plataforma, negocio, riesgo, seguridad y operaciones.
Formar a equipos en ownership, documentación, métricas, alertas y respuesta ante incidentes.
Evitar que ModelOps se perciba como burocracia que frena la innovación.
Diseñar flujos ligeros para modelos de bajo riesgo y controles estrictos para modelos críticos.
Crear comunidad interna de práctica ModelOps.
Definir responsabilidades tras el despliegue: quién mira métricas, quién aprueba cambios y quién responde a fallos.
Medir adopción por modelos registrados, monitorizados, documentados y revisados.
Revisar fricciones y ajustar procesos sin perder control.
Taller: diseñar plan de adopción ModelOps por fases.

Tema 30: Gobierno ejecutivo y reporting de cartera de modelos

Crear dashboards ejecutivos con número de modelos, estado, criticidad, rendimiento, riesgo y valor.
Reportar modelos en producción, modelos pendientes de revisión, modelos degradados y modelos retirados.
Medir tiempo de despliegue, incidencias, drift, retraining, coste y adopción.
Vincular modelos con KPIs de negocio, decisiones soportadas y procesos afectados.
Comunicar riesgos de forma comprensible para dirección y áreas no técnicas.
Crear semáforos de salud por modelo: técnico, negocio, riesgo, coste y compliance.
Establecer comités de revisión para modelos críticos.
Integrar reporting con auditoría, GRC, Data Governance y AI Governance.
Evitar reporting superficial sin capacidad de acción.
Taller: diseñar cuadro ejecutivo de cartera ModelOps.

Tema 31: Retirada, sustitución y ciclo final del modelo

Definir cuándo un modelo debe retirarse: bajo uso, bajo valor, riesgo, degradación, reemplazo o cambio normativo.
Crear proceso de deprecación con comunicación, transición y fecha de apagado.
Gestionar consumidores afectados, APIs, pipelines, dashboards y documentación.
Archivar artefactos, métricas, evidencias y decisiones de retirada.
Mantener capacidad de auditoría aunque el modelo deje de estar activo.
Evitar modelos zombie que siguen consumiendo coste o afectando decisiones.
Diseñar sustitución por nuevo modelo, regla de negocio, proceso manual o sistema externo.
Registrar impacto de retirada en negocio y operación.
Revisar dependencias antes de apagar endpoints o pipelines.
Taller: crear plan de retirada para un modelo obsoleto.

Tema 32: Roadmap de implantación ModelOps

Evaluar madurez actual: inventario, registry, pipelines, monitorización, gobierno, riesgo y herramientas.
Seleccionar modelos prioritarios por criticidad, exposición y valor.
Implantar quick wins: catálogo, owners, documentación mínima, métricas y monitorización básica.
Definir arquitectura objetivo con registry, pipelines, serving, monitoring, drift, aprobaciones y reporting.
Crear procesos por nivel de riesgo para evitar burocracia innecesaria.
Establecer roles y comités de gobierno.
Integrar ModelOps con DataOps, DevOps, SecOps, FinOps, ITSM y AI Governance.
Medir resultados: menos modelos sin owner, menor tiempo a producción, menos incidentes y más trazabilidad.
Escalar desde modelos tradicionales a LLMs, RAG y agentes.
Taller: construir roadmap ModelOps a 30, 60, 90 y 180 días.

Tema 33: Proyecto Final

Definir una organización con varios modelos: scoring, forecasting, recomendación, RAG, LLM y sistema de decisión.
Crear inventario con criticidad, owner, propósito, consumidores, datos, métricas, riesgos y estado.
Diseñar ciclo de vida ModelOps desde experimento hasta retirada.
Definir model registry, versionado, linaje, model cards, aprobaciones y documentación.
Crear estrategia de despliegue para batch, online, canary, shadow o rollback según el caso.
Diseñar monitorización de rendimiento, drift, calidad de datos, sesgo, coste, latencia y valor de negocio.
Preparar modelo de gobierno con controles por criticidad, Responsible AI, seguridad, privacidad y compliance.
Diseñar respuesta ante incidentes, retraining, recalibración, sustitución y retirada de modelos.
Crear dashboard ejecutivo de cartera con salud, riesgo, coste, valor y acciones pendientes.
Presentar el modelo final justificando arquitectura, procesos, herramientas, roles, riesgos y roadmap de implantación.

Preguntas frecuentes

Resolvemos todas tus dudas sobre nuestra formación en ModelOps (Model Operations)

Explora las respuestas a las preguntas que guian a nuestra comunidad. Aqui encontraras claridad sobre como funciona todo, desde el acceso hasta los detalles de los cursos. Si buscas respuestas, este es el lugar para comenzar.

No. MLOps se centra más en ingeniería, despliegue y automatización de modelos ML. ModelOps añade gobierno, riesgo, auditoría, negocio, compliance y ciclo completo de cartera.

¿Tienes dudas?
Estamos aqui para ayudarte

Contactar

No. MLOps se centra más en ingeniería, despliegue y automatización de modelos ML. ModelOps añade gobierno, riesgo, auditoría, negocio, compliance y ciclo completo de cartera.

¿Tienes dudas?
Estamos aqui para ayudarte

Contactar

Curso de ModelOps (Model Operations)

Aprende con el curso de ModelOps (Model Operations) para empresas hasta 100% bonificado, a medida para tu organización.

¿Qué es FUNDAE?

¿Cómo funciona FUNDAE?

¿Cómo se bonifica un curso?

¿Qué es FUNDAE?

¿Cómo funciona FUNDAE?

¿Cómo se bonifica un curso?

¿Qué es FUNDAE?

¿Cómo funciona FUNDAE?

¿Cómo se bonifica un curso?