Ana madde: Otomatik tüfekler listesi

Veri, modern işletmelerin can damarıdır, ancak ham verileri etkin bir şekilde taşımak ve işlemek için uygun altyapı olmadan yararsızdır.Bu kurs, modern veri analizi ve raporlama için gerekli güçlü otomatik veri boru hatlarını tasarlama, inşa etme ve bakımını sağlayan veri mühendisliğinde sağlam, pratik bir temel sağlar. Ne öğreneceksin: * Ortak mimari paternler de dahil olmak üzere Veri Depolama (DWH) ve Veri Gölleri'nin temel kavramlarını anlamak. * Tekrarlanabilir geliştirme ortamları için Docker kullanarak yerel veri altyapısını yapılandır ve konteynerleştir. * Verimli grup işlemi ve büyük ölçekli veri dönüşümleri için Python ve PySpark uygulayın. * ETL / ELT işlerini planlamak ve izlemek için Apache Airflow kullanarak karmaşık iş akışlarını tasarlayın ve düzenleyin. * Boru hatlarınızda veri kalitesi kontrolleri ve temel veri gözlemleme paternleri uygulayın. * DBT gibi modern veri dönüşüm çerçeveleri kullanarak modüler ve test edilebilir ELT çalışma akışlarını inşa etmeyi pratik edin. Kurs, konteyner ortamları kullanarak pratik boru hattı inşasına geçmeden önce temel veritabanı kavramları ve veri modelleme ilkeleriyle başlar. Parti işleme, akışın temelleri ve iş akışının orkestrasyonu yoluyla ilerleyeceksiniz. Bu kurs, veri mühendisliği ile ilgilenen kesin yeni başlayanların yanı sıra veri mühendideği inşa etme altyapısına geçiş yapmak isteyen veri analistleri veya geliştiriciler için tasarlanmıştır. Önceden veri mühendiği deneyimi gerekmez. Veriye dayalı kararları güçlendiren altyapıyı bugün inşa etmeye başlayın.