Lakehouse для аналитиков и инженеров данных — Октябрь 2025

12 участников

О чём курс

Масштабирование аналитических систем до х100 раз становится возможным при переходе на архитектуру Lakehouse с разделением слоев вычислений (Compute) и хранения (Storage). В основе программы — работа с современным стеком, где кластер Trino разворачивается в Kubernetes и обращается к данным в формате Iceberg на S3.

Внутри курса разбираются:

  • Принципы построения Lakehouse, которые пришли на смену традиционным аналитическим системам.
  • Технические детали форматов Iceberg и Parquet, определяющие производительность хранения.
  • Настройка и оптимизация кластера Trino, а также анализ метрик выполнения запросов.
  • Создание гибридных пайплайнов обработки данных, объединяющих SQL, Python и Spark.

Программа ориентирована на специалистов уровня Middle и Senior. Вы научитесь проектировать архитектуру данных, которая позволяет работать с огромными объемами информации без необходимости радикальной смены стека при росте нагрузки.

Программа обучения

  • Занятие 1. Lakehouse, Iceberg, разделение Compute и Storage
  • Занятие 2. Структура формата Iceberg. Формат Parquet
  • Занятие 3. Практика
  • Занятие 4. Метрики запросов в Trino
  • Занятие 5. Еще раз о формате Iceberg
  • Занятие 6. Пайплайны и финальная Q&A-сессия
Складчина создана 28 октября 2025 г. · описание обновлено 23 марта 2026 г.

Выпуски серии 2

Все 2
Повтор 14 723 ₽Октябрь 2025 Вы здесь

Другие материалы автора 2

АБ Алексей Белозерский Все материалы
5 000 ₽ 50 000 ₽