Разработка и оркестрация ETL процессов в Airflow

17 участников

О чём курс

Вам нужен инструмент для управления сложными цепочками обработки данных — этот курс разбирает Apache Airflow как стандарт индустрии для создания и автоматизации ETL-пайплайнов. Вы изучите архитектуру системы, разберетесь в принципах оркестрации данных и научитесь проектировать процессы так, чтобы они были масштабируемыми и легко поддерживаемыми. Внутри курса — детальный разбор веб-интерфейса, анализ кода типового пайплайна и практическая разработка ETL-процесса, что позволит вам сразу применять полученные знания в рабочих проектах.

Программа обучения

  • Занятие 1. Обзор Apache Airflow:
    • Что такое ETL и почему нам нужны специальные технологии для их разработки и поддержки
    • Почему Apache Airflow является лидером в области создания и управления ETL пайплайнами
    • Архитектура Apache Airflow
    • Основные концепции и инструменты для создания ETL пайплайнов в Apache Airflow
  • Занятие 2. Применение теории на практике:
    • Знакомство с веб-интерфейсом Apache Airflow и его возможностями
    • Разбор кода типового ETL пайплайна и процесс его исполнения
  • Закрепление материала:
    • Тест по теоретической части
    • Домашнее задание на разработку ETL пайплайна в Apache Airflow
Складчина создана 15 декабря 2022 г. · описание обновлено 23 марта 2026 г.

Другие материалы школы 12

М МФТИ Все материалы
1 440 ₽ 10 800 ₽