Gracias por enviar su consulta! Uno de los miembros de nuestro equipo se pondrá en contacto con usted en breve.
Gracias por enviar su reserva! Uno de los miembros de nuestro equipo se pondrá en contacto con usted en breve.
Temario del curso
Infraestructura como código para EXO
- Visión general de los patrones de implementación de EXO: nodos individuales, multinodo y clústeres con RDMA
- Automatización de la instalación de dependencias (Xcode, uv, Node.js, Rust) mediante gestión de configuraciones
- Uso de flakes de Nix para crear construcciones reproducibles de EXO y entornos de desarrollo
- Redacción de playbooks de Ansible o scripts shell para el aprovisionamiento no supervisado del clúster
Construcciones reproducibles e integración con CI
- Fijación de dependencias y construcción del panel de control en pipelines de CI
- Ejecución de pruebas de humo de EXO en GitHub Actions o ejecutores de GitLab CI
- Creación de imágenes base y flujos de reversión basados en instantáneas para máquinas virtuales macOS y Linux
- Versionado de tarjetas de modelos personalizados junto al código de la aplicación
Descubrimiento de clústeres y automatización de redes
- Configuración de mDNS y DNS estático para un descubrimiento fiable de nodos libp2p
- Automatización de la creación de perfiles de red y gestión de puentes Thunderbolt en macOS
- Uso de espacios de nombres personalizados (EXO_LIBP2P_NAMESPACE) para separar clústeres de desarrollo, pruebas y producción
- Reglas de cortafuegos y segmentación de red para entornos multiinquilino
Gestión del ciclo de vida de modelos y almacenamiento
- Diseño de estrategias para EXO_MODELS_DIRS y EXO_MODELS_READ_ONLY_DIRS
- Montaje de comparticiones NFS o SAN como repositorios de solo lectura para modelos, permitiendo un aprovisionamiento rápido
- Limpieza de cachés obsoletos y políticas de retención de pesos versionados
- Automatización de la descarga previa de modelos y verificaciones de salud antes de actualizaciones progresivas
Supervisión y alertas
- Envío de registros de EXO a registros centralizados (ELK, Loki o Splunk)
- Creación de paneles de Grafana a partir de la salida de EXO_TRACING_ENABLED
- Alertas sobre cambios en la membresía del clúster, eventos OOM y picos de latencia de inferencia
- Correlación de la telemetría de hardware macmon con regresiones en el rendimiento del modelo
Actualizaciones, reversiones y recuperación ante desastres
- Pruebas de actualizaciones de binarios de EXO en un nodo canario antes de su implementación generalizada
- Reversión a nivel de modelo: cambio entre versiones cuantizadas sin necesidad de volver a descargar
- Copia de seguridad y restauración del estado del clúster, espacios de nombres personalizados y pesos en caché
- Documentación de manuales de recuperación para escenarios de reconstrucción total del clúster
Endurecimiento de la seguridad y cumplimiento normativo
- Aplicación de TLS en la capa de proxy inverso (nginx, traefik) para el panel de control y la API
- Implementación de limitación de tasa de la API y listas blancas de IP para los puntos finales de EXO
- Aislamiento de clústeres mediante VLANs y políticas de red de confianza cero
- Auditoría de accesos y mantenimiento de un inventario de modelos implementados y sus versiones
Requerimientos
- Experiencia con prácticas de DevOps (CI/CD, IaC, orquestación de contenedores)
- Conocimiento básico de la administración de sistemas y gestión de paquetes en macOS o Linux
- Comprensión de conceptos de redes, DNS y almacenamiento
Público objetivo
- Ingenieros de DevOps
- Arquitectos de infraestructura
- SREs responsables de cargas de trabajo de IA on-premise
21 Horas
Reseñas (2)
El conocimiento y experiencia del consultor ya que se abordan los temas teóricos aplicándolos a la realidad de los procesos. El curso contiene un programa de mucho valor en la gestión de las tecnologías de información.
Luis Castro Gamboa - Cooperativa De Ahorro Y Credito Ande No. 1 R.L.
Curso - Site Reliability Engineering (SRE) Foundation®
Que fue muy claro en cada especificación
