5 дней практического обучения работе с кластером Hadoop:

• установка и настройка
• обеспечение безопасности (Kerberos, Apache Ranger — ознакомительно)
• мониторинг
• репликация и резервное копирование
• взаимодействие с компонентами экосистемы Hadoop (Apache Spark, Hive, Sqoop, HBase)
• работа с HDFS и MapReduce

О курсе "Администрирование кластера Hadoop"

Продолжительность: 5 дней, 40 академических часов.

Соотношение теории к практике 40/60.

Сегодня Apache Hadoop является самой популярной открытой платформой для распределенных вычислений и главной технологией больших данных (Big Data). Данный курс для администраторов Big Data содержит всю необходимую теоретическую информацию и практические задания по планированию и развертыванию распределенных вычислительных кластеров на базе дистрибутивов Arenadata Hadoop версии 3. Рассматриваются процессы мониторинга и оптимизации производительности системы, резервному копированию и аварийному восстановлению узлов кластера и отдельных компонент. Особое внимание уделено настройкам безопасности системы Kerberos (Active Directory и MIT/FreeIPA) на базе Hadoop.

Курс администрирование кластера Hadoop построен на сквозных практических примерах развертывания и администрирования распределенной вычислительной среды: локально и в облачной инфраструктуре. Вы изучите особенности использования компонент Hadoop для запуска задач распределенных вычислений с тестовыми данными. Практические занятия выполняются в кластерной среде Amazon Web Services/Yandex с использованием Apache Hadoop версии 3 на базе дистрибутива Arenadata Hadoop Community Edition (Cloudera Data Platform (CDP) Private Cloud) или Apache Hadoop, а также программного обеспечения управления кластером Arenadata Cluster Manager ADCM (Cloudera Manager).