Практикум по Data Engineering: сквозной ETL на Spark + Postgres + Airflow + BI
Описание
Практикум по Data Engineering от Дмитрия Кузьмина: сборка полноценного ETL-пайплайна на Spark + Postgres + Airflow + BI в Docker на собственном ноутбуке. Проект для портфолио: S3-lake → Spark → DWH → Airflow → BI.
Что в мастер-классе
- Настройка Docker-стенда
- Apache Spark для обработки данных
- PostgreSQL как DWH
- Apache Airflow для оркестрации
- BI-визуализация
- Инкрементальные загрузки
Отзывов пока нет. Будьте первым!
Этот мастер-класс сейчас в процессе организации складчины. Нажмите кнопку «Записаться» и ожидайте старта — вам придёт уведомление. Когда складчина стартует, в карточке мастер-класса будет указан актуальный взнос. Текущая цена пока в процессе формирования и может отличаться от финальной.
Да, мы стремимся, чтобы финальный взнос был не больше ≈10% от оригинальной цены мастер-класса. Чем больше участников записывается в складчину, тем ниже выходит взнос для каждого.
Нажмите кнопку «Записаться» и авторизуйтесь на сайте через email (через ту же почту, которую будете использовать для входа). В личном кабинете вас будут ждать инструкции, как пригласить других участников — чем больше людей записалось, тем быстрее стартует складчина и тем ниже взнос. Как только складчина готова к приобретению, вам придёт уведомление.