Автоматизируем процессы обработки данных с Managed Service for Apache Airflow

7 декабря в 12:00 на вебинаре поговорили о ключевых возможностях Managed Service for Apache Airflow™, сервиса для управления оркестратором потоков операций по обработке данных. Архитектор Yandex Cloud Иван Веткасов рассказал, как создать кластер Airflow, настроить data pipeline и контролировать процесс обработки данных, а также как сервис Managed Airflow интегрирован в экосистему Yandex Cloud. Рассмотрели: * как устроена архитектура Managed Service for Apache Airflow™ в Yandex Cloud; * как быстро развернуть и масштабировать компоненты Airflow; * как загружать DAG-файлы и контролировать диагностику их выполнения, просматривать логи; * как мы планируем развивать сервис дальше. Вебинар полезен аналитикам данных и дата-инженерам, которые уже используют или только начинают изучать Data Proc, DataLens, Object Storage и другие аналогичные сервисы. 00:00 Краткое содержание (Иван Веткасов) 01:33 Обзор Managed Servicefor Apache Airflow™ (Иван Веткасов) 09:14 Архитектура сервиса (Иван Веткасов) 11:56 Глазами пользователя (Иван Веткасов) 19:41 Основные сценарии работы с сервисом (Иван Веткасов) 30:41 Планы развития сервиса (Иван Веткасов)