Curso de cloud computing y Big Data

Lección 1 • Conceptos e Historia del Cómputo en la Nube

Rastrea la evolución de la nube desde los mainframes hasta los hiperescaladores modernos y define la terminología esencial. Proporciona la base conceptual para todos los temas posteriores sobre la nube.

Lección 2 • Modelos de Servicio en la Nube Explicados

Diferencia IaaS, PaaS y SaaS mediante comparaciones funcionales y ejemplos del mundo real. Permite a los estudiantes mapear cargas de trabajo a la capa de servicio correcta.

Lección 3 • Modelos de Despliegue en la Nube

Examina arquitecturas de nube pública, privada, híbrida y multi-nube con análisis de ventajas y desventajas. Conecta la elección de despliegue con los objetivos de cumplimiento y costos organizacionales.

Lección 1 • Servicios de Almacenamiento en la Nube

Cubre los tipos de almacenamiento de objetos, bloques y archivos con sus ventajas y desventajas de durabilidad y patrones de acceso. Prepara a los estudiantes para seleccionar niveles de almacenamiento para diversos requisitos de aplicaciones.

Lección 2 • Gestión de Identidades y Accesos

Enseña control de acceso basado en roles, políticas y principios de mínimo privilegio para entornos en la nube. Establece la higiene de seguridad requerida antes de desplegar cualquier carga de trabajo de producción.

Lección 3 • Servicios de Cómputo y Máquinas Virtuales

Presenta las máquinas virtuales, los tipos de instancia y los grupos de autoescalado como elementos primitivos de cómputo básicos. Aplica directamente el conocimiento del modelo de servicio en la nube al aprovisionamiento de infraestructura.

Lección 4 • Servicios de Base de Datos Administrada

Examina las ofertas de bases de datos relacionales y NoSQL administradas, cubriendo estrategias de aprovisionamiento y respaldo. Conecta el conocimiento de almacenamiento con la arquitectura de aplicaciones con estado.

Lección 1 • Modelos de Procesamiento por Lotes y en Streaming

Contrasta el procesamiento por lotes con el procesamiento en streaming en tiempo real usando las arquitecturas Lambda y Kappa. Prepara a los estudiantes para diseñar tuberías que coincidan con los requisitos de latencia y rendimiento de transferencia.

Lección 2 • Introducción al Ecosistema Hadoop

Explica HDFS, MapReduce, YARN y las herramientas clave del ecosistema como base del procesamiento distribuido por lotes. Proporciona contexto histórico y técnico para los frameworks modernos de big data.

Lección 3 • Arquitecturas de Almacenamiento de Big Data

Cubre sistemas de archivos distribuidos, lagos de datos y almacenes de datos como paradigmas de almacenamiento complementarios. Une el conocimiento de almacenamiento en la nube con las necesidades de ingesta y retención de big data.

Lección 4 • Principios de Diseño de Tuberías de Big Data

Introduce las capas de ingesta, transformación, almacenamiento y servicio como un framework unificado de tuberías. Brinda a los estudiantes una plantilla de diseño aplicada a lo largo de los capítulos restantes de big data.

Lección 1 • Estrategias de Carga de Almacenes de Datos

Cubre el modelado dimensional, las dimensiones que cambian lentamente y los patrones de carga masiva para almacenes analíticos. Conecta las tuberías de ingesta con estructuras de almacén optimizadas para consultas.

Lección 2 • Ingesta de Datos en Streaming en Tiempo Real

Enseña colas de mensajes, plataformas de streaming de eventos y patrones productor-consumidor para datos en tiempo real. Amplía el conocimiento de ingesta por lotes a escenarios de baja latencia y alto rendimiento de transferencia.

Lección 3 • Técnicas de Ingesta por Lotes

Cubre flujos de trabajo ETL, ingesta basada en archivos y transferencias de datos programadas para conjuntos de datos grandes. Aplica principios de diseño de tuberías a fuentes de datos estructuradas y semiestructuradas.

Lección 4 • Calidad y Validación de Datos

Introduce la elaboración de perfiles de datos, la validación de esquemas y la detección de anomalías como controles de calidad en la ingesta. Asegura que los análisis posteriores y los modelos de aprendizaje automático reciban datos confiables.

Lección 1 • Optimización del Rendimiento de Spark

Aborda el particionamiento, el almacenamiento en caché, las uniones broadcast y la serialización como palancas clave de optimización de Spark. Traduce el conocimiento teórico de Spark en eficiencia de trabajos a nivel de producción.

Lección 2 • Spark Streaming y Structured Streaming

Cubre los modelos de procesamiento por micro-lotes y continuo para datos en tiempo real con Structured Streaming. Amplía las habilidades de Spark por lotes a tuberías de streaming de baja latencia.

Lección 3 • Arquitectura de Spark y Conceptos Básicos

Explica el driver, el executor, el programador DAG y el modelo RDD como base de ejecución de Spark. Construye el modelo mental necesario para escribir y depurar aplicaciones Spark de manera efectiva.

Lección 4 • Ejecutando Spark en Plataformas en la Nube

Demuestra el aprovisionamiento de clústeres Spark administrados, autoescalado y control de costos en servicios en la nube. Conecta las habilidades de Spark con prácticas reales de despliegue y operación en la nube.

Lección 1 • Tuberías Sin Servidor y Dirigidas por Eventos

Cubre disparadores de función como servicio, buses de eventos y servicios de flujo de trabajo nativos de la nube para tuberías ligeras. Complementa Airflow con patrones de automatización dirigidos por eventos y de baja sobrecarga.

Lección 2 • Monitoreo y Observabilidad de Tuberías

Cubre el registro, las métricas, las alertas y el seguimiento de linaje para la visibilidad operativa de las tuberías. Permite a los equipos detectar, diagnosticar y resolver fallas en las tuberías rápidamente.

Lección 3 • Fundamentos de Orquestación de Tuberías

Introduce la orquestación de flujos de trabajo basada en DAG, dependencias de tareas y conceptos de programación. Proporciona la base arquitectónica para automatizar tuberías de datos de múltiples pasos.

Lección 4 • Construyendo Tuberías con Apache Airflow

Enseña la creación de DAGs, operadores, hooks y XComs para construir flujos de trabajo complejos en Airflow. Aplica conceptos de orquestación a una plataforma de código abierto ampliamente adoptada.

Lección 1 • Principios de Visualización de Datos

Introduce la selección de gráficos, la codificación visual y los principios de narrativa para la comunicación analítica. Asegura que las visualizaciones representen los datos con precisión e impulsen decisiones informadas.

Lección 2 • Optimización de Consultas Analíticas

Enseña planificación de consultas, indexación, vistas materializadas y optimización basada en costos para grandes conjuntos de datos analíticos. Se basa en el conocimiento de carga de almacenes para maximizar el rendimiento de las consultas.

Lección 3 • Analítica en Tiempo Real y Tableros de Streaming

Amplía la analítica por lotes a casos de uso en tiempo real utilizando agregaciones en streaming y tableros en vivo. Conecta el conocimiento de Spark Streaming y tuberías a escenarios de analítica operativa.

Lección 4 • Análisis Exploratorio de Datos a Gran Escala

Cubre resúmenes estadísticos, análisis de distribución y técnicas de correlación aplicadas a grandes conjuntos de datos. Une la ingesta de datos en bruto con la investigación analítica basada en hipótesis.

Lección 1 • Flujo de Trabajo de AA y Fundamentos de MLOps

Mapea el ciclo de vida de AA de extremo a extremo, desde la preparación de datos hasta el servicio y monitoreo del modelo. Establece el framework operativo para todos los temas posteriores de implementación de AA.

Lección 2 • Almacenes de Características y Tuberías de Datos para AA

Introduce los almacenes de características como un puente entre las tuberías de datos y el entrenamiento y servicio de AA. Asegura características consistentes y reutilizables en el entrenamiento y la inferencia en producción.

Lección 3 • Despliegue y Servicio de Modelos

Enseña inferencia por lotes, endpoints REST en tiempo real y patrones de despliegue en el extremo para modelos de AA. Conecta los modelos entrenados con sistemas de producción que entregan valor de negocio.

Lección 4 • Entrenamiento Distribuido de Modelos

Cubre el paralelismo de datos, el paralelismo de modelos y los frameworks de entrenamiento distribuido para AA a gran escala. Aplica el conocimiento de Spark y cómputo en la nube para acelerar el entrenamiento de modelos en big data.