Современное преобразование данных с dbt (инструмент построения данных)

Вы боретесь с управлением сложной логикой преобразования данных или поддерживаете чистые, надежные модели данных? dbt (Data Build Tool) является отраслевым стандартом для современных рабочих процессов хранения данных, позволяя вам рассматривать преобразование как программный код. Этот курс научит вас, как использовать мощную платформу dbt для эффективного определения, тестирования и развертывания преобразований данных. Вы приобретете навыки, необходимые для реализации масштабируемых методов моделирования данных, используемых сегодня лучшими инженерными командами. Что вы узнаете: * Понимание рабочего процесса dbt, включая структуру проекта, источники, семена и определение моделей данных с использованием чистого SQL. * Мастер Jinja шаблонов и макросов, чтобы устранить повторяющийся код и создать динамическую, многоразовую логику SQL. * Применение современных методологий тестирования (сингулярные и генерические тесты) для обеспечения качества и целостности данных во всех ваших преобразованиях. * Настройка материализаций (видов, таблиц, приростных моделей) для оптимизации производительности запросов и управления затратами на выполнение конвейера. * Создание надежного управления данными путем тщательного документирования ваших активов данных и создания всеобъемлющего, поискового сайта проекта. Курс начинается с настройки вашего первого проекта dbt и проходит через определение базовых моделей, интеграцию расширенного тестирования и, наконец, развертывание полностью задокументированного конвейера данных. Этот курс предназначен для начинающих аналитиков данных, разработчиков SQL или начинающих инженеров данных с базовыми знаниями SQL, которые хотят перейти к современным методам преобразования ELT. Не требуется предыдущий опыт работы с dbt. Начните создавать надежные, готовые к производству конвейеры данных сегодня.