Ingeniería de datos fundamentales: construcción de tuberías ELT automatizadas

Los datos son la sangre de los negocios modernos, pero los datos en bruto son inútiles sin una infraestructura adecuada para moverlos y procesarlos de manera eficiente.Este curso proporciona una base sólida y práctica en Ingeniería de Datos, lo que le permite diseñar, construir y mantener tuberías de datos automatizadas robustas necesarias para el análisis y la generación de informes de datos modernos. Lo que aprenderás: * Comprender los conceptos fundamentales de Data Warehousing (DWH) y Data Lakes, incluidos los patrones de arquitectura comunes. * Configurar y contenerizar la infraestructura de datos local utilizando Docker para entornos de desarrollo reproducibles. * Aplicar Python y PySpark para un procesamiento por lotes eficiente y transformaciones de datos a gran escala. * Diseñar y orquestar flujos de trabajo complejos utilizando Apache Airflow para programar y monitorear trabajos ETL / ELT. * Implementar controles de calidad de datos y patrones básicos de observabilidad de datos dentro de sus tuberías. * Practique la construcción de flujos de trabajo ELT modulares y probables utilizando marcos de transformación de datos modernos como DBT. El curso comienza con conceptos de base de datos fundamentales y principios de modelado de datos antes de pasar a la construcción práctica de la canalización utilizando entornos en contenedores.Progresará a través del procesamiento por lotes, los conceptos básicos de ingestión de flujos y la orquestación de flujo de trabajo. Este curso está diseñado para principiantes absolutos interesados en la ingeniería de datos, así como analistas de datos o desarrolladores que buscan la transición a la construcción de infraestructura de datos.No se requiere experiencia previa en ingeniería.Comience a construir la infraestruktura que impulsa las decisiones basadas en datos hoy.