データエンジニアリングプロジェクト：モダンなデータプラットフォームの構築

孤立したデータツールを学ぶことから、完全に統合されたデータシステムを構築することに移行する準備はできていますか？この実践的なテキストベースのコースでは、完全なデータ分析プラットフォームをゼロから設計および実装する方法をガイドします。 堅牢なデータパイプラインの設計を任されたアソシエイトデータエンジニアの役割を担います。構造化された説明を読み、コードスニペットを分析し、構成ファイルを記述することにより、業界標準のツールと最新のベストプラクティスを使用して、データの取り込み、変換、保存、およびオーケストレーションを行う方法を学びます。 学習内容： - 構造化データおよび半構造化ビジネスデータをサポートするためのリレーショナルおよび非リレーショナルデータベーススキーマの設計 - 最新のPython dataframeライブラリと構造化スクリプトを使用して効率的なETLパイプラインを構築 - 開発環境と本番環境全体で一貫した環境を確保するために、Dockerを使用してデータサービスをコンテナ化 - 高いデータ品質を確保するために、基本的な自動データパイプラインワークフローとテストを構成 - 一元化されたデータウェアハウスを実装し、最適化されたSQLクエリを作成して、実用的なビジネスインサイトを生成 このコースは、基礎となるアーキテクチャ設計とデータベースのセットアップから始まり、ETLスクリプトの作成、アプリケーションのコンテナ化、およびワークフロー全体のオーケストレーションへと進みます。 このコースは、PythonとSQLの基本的な理解があり、ポートフォリオに含める準備のできたプロジェクトを構築したいと考えている、意欲的なデータエンジニア、データベース管理者、およびソフトウェア開発者向けに設計されています。高度な前提条件は必要ありません。 最初の本番環境に対応したデータプラットフォームを構築するために、今日から読み始めましょう。