(Inggris) Azure Databricks for Data Engineers: A Practical Guide

Rekayasa data modern memerlukan pipa pengolahan data yang dapat diskala, dapat diandalkan, dan cepat. Azure Databricks menyediakan platform kolaborasi yang kuat untuk membangun arsitektur data yang kuat ini secara skala. Dalam kursus ini, Anda akan berpindah dari memahami konsep dasar data awan ke merancang pipa data tingkat produksi. Anda akan belajar untuk memproses data besar secara efisien, menerapkan arsitektur lakehouse modern, dan mengelola aset data secara aman. Apa yang akan kau pelajari: - Mengerti arsitektur dasar Azure Databricks dan ruang kerja data awan. - Membangun dan mengoptimalkan pipa data yang dapat diandalkan menggunakan Delta Lake dan Delta Tables. - Proses real-time dan batch data secara efisien menggunakan streaming terstruktur. - Implementasi tata kelola data modern dan prinsip keamanan dengan Unity Catalog. - Tulis kode PySpark yang bersih dan dioptimalkan untuk transformasi data yang dapat disesuaikan. - Praktik troubleshooting dan tuning kinerja untuk beban kerja data besar. Anda akan mulai dengan mempelajari konsep dasar cluster dan pengaturan ruang kerja sebelum beralih ke pengembangan pipa, operasi Delta Lake, dan aliran kerja tata kelola yang canggih. Melalui penjelasan tertulis yang jelas dan contoh kode praktis, Anda akan membangun pemahaman yang kuat tentang praktik rekayasa data modern. Kursus ini dirancang untuk insinyur data bercita-cita, administrator database, dan pengembang perangkat lunak yang baru dalam pemrosesan data skala awan. Tidak diperlukan pengalaman sebelumnya dengan Azure Databricks, meskipun pemahaman dasar SQL atau Python akan membantu. Mulailah perjalanan Anda menuju membangun platform data tingkat perusahaan yang dapat diandalkan hari ini.