Разработка устойчивых потоковых систем на GCP

Современные предприятия полагаются на мгновенные данные для принятия важных решений, поэтому устойчивые потоковые системы являются важным активом для любого специалиста по данным. Этот текстовый курс поможет вам освоить основные концепции проектирования отказоустойчивых конвейеров данных на GCP. Вы перейдете от понимания основных принципов приема данных к созданию надежных, автоматически масштабируемых потоковых архитектур, которые обрабатывают данные, поступающие с опозданием, управляют сбоями в системе и предоставляют заинтересованным сторонам информацию в режиме реального времени. Что вы узнаете: - Понять основную архитектуру потоковых систем в реальном времени и систем, управляемых событиями. - Настройка Pub/Sub для надежного приема высокоскоростных потоков данных. - Создание потоковых конвейеров с Dataflow для обработки и преобразования данных на лету. - Применять стратегии окон и триггеров для обработки запоздалых или неправильных данных. - внедрение мониторинга трубопроводов и базовой наблюдаемости для обеспечения устойчивости системы. - Разработка данных в реальном времени и панелей для отчетности заинтересованных сторон. Курс начинается с основных понятий и терминологии потокового вещания, а затем переходит к поэтапным письменным объяснениям по настройке Pub/Sub и написанию конвейеров Dataflow. Вы закончите изучение стратегий мониторинга и интеграции панели управления с помощью четких примеров кода и концептуальных обзоров. Этот курс предназначен для начинающих инженеров, разработчиков и аналитиков, которые только начинают работать с потоковыми архитектурами в облаке. Не требуется предыдущий опыт работы с GCP или обработки данных в реальном времени. Начните создавать надежные системы реального времени уже сегодня.