Складчина
Каталог
Мои курсы

Курс для разработчиков больших данных

13 участников
BD Автор Big Data Школа Deesa Technologies

О чём курс

Разработчики больших данных постоянно востребованы, но освоение стека технологий для работы с колоссальными объемами информации часто кажется непосильной задачей. Этот курс — 33 часа практики, закрывающий путь от основ Hadoop до развертывания сложных конвейеров обработки данных на рабочем уровне.

Внутри разбираются ключевые инструменты современной Big Data экосистемы: от управления хранилищами Hadoop и анализа данных в Hive до интеграции Spark с NoSQL-базами данных Cassandra и HBase. Вы научитесь работать с потоковыми данными через Kafka и Spark Streaming, а также освоите Apache NiFi для автоматизации процессов. Курс ориентирован на тех, кто хочет пройти путь от локальной разработки до настройки производительности и устранения неполадок в реальных проектах.

Программа обучения

  • Введение в мир больших данных: важность и основы
  • Архитектура Hadoop: концепции и принципы работы
  • Настройка окружения и установка ПО
  • Базовые команды Hadoop
  • Работа с форматами файлов: критерии выбора для разных задач
  • Apache Sqoop: импорт и экспорт данных между БД MySQL и HDFS
  • Apache Hive: эффективные запросы и аналитика
  • Программирование на Scala
  • Apache Spark: от базовых до продвинутых концепций
  • Обработка сложных данных с использованием Spark
  • Интеграция Cassandra и HBase со Spark
  • Apache NiFi: возможности и применение
  • Spark Streaming: интеграция с Kafka и потоковая обработка
  • Построение сквозных (end-to-end) конвейеров больших данных
Складчина создана 18 мая 2023 г. · описание обновлено 3 мая 2026 г.

Ещё интересные курсы 12

Ещё интересные курсы

115 ₽ 800 ₽