Hadoop Distributed File System (HDFS)
О чём курс
Распределённая файловая система HDFS позволяет хранить массивы данных, объем которых практически неограничен. Это фундамент экосистемы Apache Hadoop, на котором строятся работа Spark, Hive, HBase и задачи машинного обучения.
Внутри разбираются следующие аспекты:
- Архитектура и компоненты HDFS, определяющие работу с большими данными.
- Практические методы записи и чтения данных внутри кластера.
- Работа с интерфейсами HDFS: от командной оболочки shell до Python API и Web API.
Курс ориентирован на тех, кто делает первые шаги в Big Data или хочет разобраться во внутреннем устройстве распределенного хранения. Итогом станет понимание принципов работы HDFS, умение администрировать систему и программно взаимодействовать с данными.
Программа обучения
- Зачем нужны большие данные
- Распределённые файловые системы. Файловые системы HDFS. Их составляющие. Их достоинства, недостатки и сфера применения
- Чтение и запись в HDFS
- HDFS APIs: Web API, shell, Python API
- Форма закрепления знаний - тестирование и выполнение домашней работы
Другие материалы автора 7
ОИ Олег Ивченко Все материалыОтзывов пока нет. Будьте первым!
Это не розничная цена — это ваш взнос в складчину. Мы собираем группу участников и делим между ними стоимость официального доступа: каждый платит только свою долю, а получает весь материал. Чем больше участников, тем меньше взнос. После того как сумма собрана, мы оформляем официальный доступ и раздаём материалы всем, кто участвовал.
Нажмите кнопку «Получить доступ» на этой странице и следуйте инструкциям. Вас переведёт на форму оплаты — доступны все современные способы (карта, СБП, электронные кошельки). После оплаты на почту придёт письмо с доступом: материалы выдаются в разделе «Мои складчины» на нашем основном сайте skladchik.org. Учтите: в России skladchik.org открывается только через ускоритель интернета (VPN) — настроить его можно за пару минут по инструкции на skladchik-kak-voiti.online.
Да, конечно. Все материалы — видео, PDF, дополнительные файлы — можно скачать к себе на компьютер и пользоваться ими сколько угодно, без ограничений по времени. Ссылки остаются активными в вашей библиотеке «Мои складчины».