Erstellen moderner Datenpipelines mit Snowflake, dbt und Airbyte

Unternehmen werden heutzutage von Daten überflutet. Die eigentliche Herausforderung besteht jedoch darin, diese Rohdaten in verwertbaren Geschäftswert umzuwandeln. Dazu verlassen sich moderne Datenteams auf eine spezielle Suite von Tools, die als Modern Data Stack bekannt ist. Dieser textbasierte Kurs führt Sie durch den gesamten Lebenszyklus des modernen Data Engineerings, beginnend mit grundlegenden Definitionen, bevor Sie zur Pipeline-Implementierung übergehen. Sie lernen, wie Sie robuste Pipelines entwerfen, die Daten in Ihrem gesamten Unternehmen aufnehmen, bereinigen, transformieren und aktivieren.Durch klare schriftliche Erklärungen und praktische Code-Snippets erhalten Sie ein tiefes Verständnis dafür, wie moderne Daten-Ökosysteme funktionieren. Was Sie lernen werden: - Verstehen Sie die Kernarchitektur des Modern Data Stack, einschließlich der Paradigmen Lakehouse und Data Mesh. - Konfigurieren Sie Datenaufnahmepipelines aus verschiedenen Quellen mit Tools wie Airbyte und Fivetran. - Entwerfen Sie zentrale Datenspeicherlösungen innerhalb eines Cloud-Data-Warehouses wie Snowflake. - Transformieren Sie Rohdaten in saubere, analytische Modelle mit dbt und versioniertem SQL. - Wenden Sie DataOps-Prinzipien an, einschließlich automatisierter Tests und grundlegender Pipeline-Workflows, um die Datenqualität sicherzustellen. - Aktivieren Sie Ihre transformierten Daten, indem Sie sie mit Reverse ETL-Konzepten und Tools wie Hightouch mit Geschäftsanwendungen synchronisieren. Der Kurs beginnt mit der grundlegenden Terminologie und den Architekturkonzepten, bevor Sie Schritt für Schritt durch schriftliche Anleitungen zu Aufnahme, Transformation und Aktivierung geführt werden.Dieser Kurs richtet sich an Anfänger, angehende Dateningenieure und Analysten, die ihre Fähigkeiten modernisieren möchten. Beginnen Sie noch heute mit dem Lesen, um die modernen Tools zu meistern, die datengestützte Organisationen vorantreiben.