هندسة البيانات التأسيسية: بناء مسارات ELT مؤتمتة

البيانات هي شريان الحياة للأعمال الحديثة، ولكن البيانات الخام لا قيمة لها بدون بنية تحتية مناسبة لنقلها ومعالجتها بكفاءة. توفر هذه الدورة أساسًا متينًا وعمليًا في هندسة البيانات (Data Engineering)، مما يمكّنك من تصميم وبناء وصيانة مسارات بيانات مؤتمتة قوية ضرورية لتحليل البيانات الحديثة وإعداد التقارير. ما ستتعلمه: * فهم المفاهيم الأساسية لمستودعات البيانات (Data Warehousing - DWH) وبحيرات البيانات (Data Lakes)، بما في ذلك الأنماط المعمارية الشائعة. * تكوين وبناء بنية تحتية للبيانات المحلية في حاويات باستخدام Docker لبيئات تطوير قابلة للتكرار. * تطبيق Python و PySpark للمعالجة الدفعية الفعالة وتحويلات البيانات على نطاق واسع. * تصميم وتنسيق سير العمل المعقد باستخدام Apache Airflow لجدولة ومراقبة مهام ETL/ELT. * تنفيذ فحوصات جودة البيانات وأنماط مراقبة البيانات الأساسية (data observability) داخل مساراتك. * التدرب على بناء سير عمل ELT معياري وقابل للاختبار باستخدام أطر عمل تحويل البيانات الحديثة مثل DBT. تبدأ الدورة بمفاهيم قواعد البيانات الأساسية ومبادئ نمذجة البيانات قبل الانتقال إلى بناء المسارات العملية باستخدام بيئات الحاويات. ستتقدم عبر المعالجة الدفعية، وأساسيات استيعاب التدفق (stream ingestion)، وتنسيق سير العمل. تم تصميم هذه الدورة للمبتدئين تمامًا المهتمين بهندسة البيانات (Data Engineering)، وكذلك لمحللي البيانات أو المطورين الذين يسعون للانتقال إلى بناء البنية التحتية للبيانات. لا يلزم وجود خبرة سابقة في هندسة البيانات. ابدأ في بناء البنية التحتية التي تدعم القرارات المستندة إلى البيانات اليوم.