Управление информационной безопасностью кластера Arenadata Hadoop

Профиль аудитории:

• Системные администраторы.
• Системные архитекторы.
• Системные инженеры.

Предварительные требования:

• знания и навыки работы с командами и сервисами Linux-систем (командная строка, файловая система, текстовые редакторы vi, vim, nano и др.);
• обязателен опыт работы с SQL;
• знание основ информационной безопасности;
• знание механизмов и терминов SSL/TLS сертификации (CSR-запрос, удостоверяющий центр, CA, Java KeyStore);
• навыки работы с продуктами Arenadata Hadoop и Arenadata Cluster Manager;
• знание и навыки работы с MIT Kerberos, LDAP(одна из реализаций: OpenLDAP, Active Directory, FreeIPA и др.).

По окончании курса слушатели научатся:

• планированию и развертыванию кластеров Arenadata Hadoop и Platofrm Security;
• комплексной настройке безопасности (безопасность периметра, аутентификация, авторизация, аудит, защита данных);
• конфигурированию инструментов обеспечения безопасности для основных компонент и служб экосистемы Hadoop (HDFS, YARN, Hive, HBase, Solr, Knox);
• работе клиентов компонентов кластера и конфигурированию вариантов аутентификации сервисов (Kerberos, LDAP);
• работе мультикластерной среды на платформе Arenadata Platofrm Security;
• анализу файлов логирования компонент кластера Arenadata Hadoop и Platofrm Security.

Модуль 1. «Введение в экосистему Hadoop/ADPS»

1. Обзор экосистемы Arenadata Enterprise Data Platform (EDP). Основные компоненты безопасности:

• Основные компоненты и экосистема. Безопасность кластеров. Сравнение редакций продуктов.

2. Основные компоненты Arenadata Platform Security:

• Kerberos, Apache Ranger, Solr, Knox, Zookeeper. Описание и основные компоненты.

Модуль 2. «Подготовка окружения к установке Arenadata Platform Security»

1. Планирование кластера:

• Типы узлов. Профили нагрузки. Аппаратное обеспечение. Примеры кластеров.

2. Настройка параметров окружения:

• Подготовка к установке. Настройка сети и DNS. Подготовка MIT/LDAP-сервера(ов), СУБД.

3. Лабораторная работа.

Модуль 3. «Установка и настройка ADH/ADPS»

1. Основные этапы установки и подготовка инфраструктуры:

• Распределение компонент ADH/ADPS. Установка кластера ADH/ADPS.
• Лабораторная работа.

2. Керберизация ADH/ADPS:

• Керберизация ADH/ADPS: Active Directory. Установка CA TLS-сертификата.
• Лабораторная работа.

3. Kerberos-аутентификация для web-интерфейсов компонентов. Настройка SPNEGO для браузеров.

• Лабораторная работа.

4. Настройка LDAP sync source для Ranger User synchronizer.

• Лабораторная работа.

5. Настройка LDAP/AD auth для Ranger Admin

• Лабораторная работа.

6. Hive DUAL auth (LDAP/Kerberos)

• Конфигурирование Hive.
• Настройка клиентов для подключения к Hive (Kerberos, LDAP).
• Лабораторная работа.

7. Настройка клиентов HBase/Phoenix (thin, thick)
8. Настройка Zeppelin Active Directory auth в ADCM. Zeppelin Interpreter Impersonation.

• Лабораторная работа.

Модуль 4. «Apache Ranger. Knox Gateway»

1. Компоненты безопасности Hadoop
2. Присоединение узлов к Active Directory:

• SSSD/realmd.
• Лабораторная работа.

3. Настройка авторизации Apache Ranger в ADH и ADPS

• Лабораторная работа.

4. Apache Ranger: Audit
5. Apache Ranger: Policies

• Обзор и создание.
• Настройки политик в Ranger:
• HDFS: Настройка пространства HDFS (RWX)
• YARN: Очереди
• Hive: Доступ к DataBase, Table, Column
• HBase: Доступ Table, Family Column, Column.
• Solr: Доступ к коллекциям.
• Knox: Доступ к сервису.
• Лабораторная работа.

6. Apache Ranger: Column Masking Hive

• Лабораторная работа.

7. Apache Ranger: Hive Row Level Filter
8. Apache Ranger Security Zones
9. Apache Knox Gateway

• Поля Audit Log.
• Настройка Knox в ADPS и Active Directory auth.
• Лабораторная работа

Модуль 5. «Настройка шифрования SSL Arenadata Hadoop и Platform Security. Постнастройка сервисов»

1. Настройка SSL ADH и ADPS

• Сертификаты и Центры сертификации.
• Шифрование данных. Основные этапы настройки SSL.
• Лабораторная работа.

2. Настройка Apache Ranger Admin HA

• Лабораторная работа.

3. Настройка Arenadata Cluster Manager

• Настройка ADCM LDAP Sync.
• Настройка ADCM HTTPS
• Лабораторная работа.

4. Работа ADPS с несколькими кластерами ADH (в мультикластерной среде)
5. Керберизация ADH/ADPS и настройка компонентов с использованием FreeIPA

• Создание и настройка сервера FreeIPA
• Керберизация ADH/ADPS: FreeIPA