Hadoop Distributed File System (HDFS)

Распределённая файловая система HDFS позволяет хранить массивы данных, объем которых практически неограничен. Это фундамент экосистемы Apache Hadoop, на котором строятся работа Spark, Hive, HBase и задачи машинного обучения.

Внутри разбираются следующие аспекты:

• Архитектура и компоненты HDFS, определяющие работу с большими данными.
• Практические методы записи и чтения данных внутри кластера.
• Работа с интерфейсами HDFS: от командной оболочки shell до Python API и Web API.

Курс ориентирован на тех, кто делает первые шаги в Big Data или хочет разобраться во внутреннем устройстве распределенного хранения. Итогом станет понимание принципов работы HDFS, умение администрировать систему и программно взаимодействовать с данными.