Установка кластера

Евгения Кузина, Дарья Барышева

Шаг 1. Запуск установки

Существует два способа установки:

  1. Установка всего кластера. В этом методе все сервисы кластера устанавливаются автоматически друг за другом после применения действия Install к кластеру.

  2. Установка отдельных сервисов. В этом методе каждый сервис устанавливается вручную путем применения к нему одного или нескольких действий. Этот способ также можно использовать для добавления новых сервисов в уже развернутый кластер.

В обоих методах каждый сервис запускается автоматически после установки.

ВАЖНО
Установка должна производиться на чистые хосты без предустановленного подобного ПО.

Установка всего кластера

Чтобы установить все сервисы кластера за одну операцию, выполните шаги:

  1. Примените действие Install к кластеру, выбранному на странице Clusters, нажав на иконку actions default dark actions default light в столбце Actions.

    Переход к установке всего кластера
    Переход к установке всего кластера

  2. Подтвердите действие в открывшемся окне.

    Подтверждение действия
    Подтверждение действия

  3. Дождитесь завершения установки.

Установка отдельных сервисов

Чтобы установить один или несколько сервисов вручную, необходимо предварительно добавить эти сервисы в кластер и затем применить к ним действия, описанные ниже.

ВНИМАНИЕ
Обратите внимание, что сервисы устанавливаются по очереди друг за другом. Не пытайтесь установить следующий сервис до окончания установки предыдущего.

  1. Откройте вкладку Services на странице кластера. Для сервиса, который должен быть установлен, нажмите на иконку actions default dark actions default light в столбце Actions и выберите действие Install из выпадающего списка.

    Переход к установке отдельных сервисов
    Переход к установке отдельных сервисов

  2. Подтвердите действие в открывшемся окне.

    Подтверждение действия
    Подтверждение действия

  3. Дождитесь завершения установки и убедитесь, что статус сервиса изменился с created на installed.

  4. Повторите предыдущие шаги для всех сервисов, которые необходимо установить.

ВАЖНО

При установке сервисов вручную важно соблюдать следующий порядок:

  1. Zookeeper

  2. HDFS

  3. YARN

  4. HBase

  5. Hive

  6. Spark

  7. Monitoring

Шаг 2. Просмотр результатов установки

ADCM запускает отдельную задачу (job) для установки, как и для любого другого процесса. Для получения информации о статусе задач предназначена cтраница Jobs.

Страница Jobs
Страница Jobs

Если установка завершается успешно, соответствующая ей задача на странице Jobs переходит из статуса running в success; в противном случае — в статус failed. Чтобы получить более детальную информацию о возникших ошибках, можно перейти на страницу задачу, кликнув по ней в списке задач на странице Jobs. Откроется окно с шагами выполнения задачи. Кликните многоточие в столбце Details, чтобы получить дополнительную информацию об определенном шаге.

Переход на страницу задачи (job)
Переход на страницу с подробностями выполнения

Страница задачи содержит два основных раздела: ansible [ stdout] и ansible [ stderr ]. Это технические логи, содержащие информацию из стандартных I/O-потоков stdout/stderr.

В дополнение к ним может выводиться третий опциональный раздел ansible [ check ]. Он содержит краткие описания наиболее часто возникающих ошибок. По сравнению с предыдущими разделами, эти описания, как правило, более простые и конкретные.

При возникновении ошибок в процессе установки рекомендуется изучить логи всех трех разделов.

Страница задачи (job)
Подробности выполнения задачи

Шаг 3. Проверка статуса кластера после установки

В результате успешной установки происходит обновление статуса кластера и его сервисов:

  • Статус кластера, отображаемый в столбце State на странице Clusters, меняет свое значение с created на installed.

    Статус кластера после успешной установки
    Статус кластера после успешной установки

  • Статус сервисов, отображаемый на вкладке Services страницы кластера, меняет свое значение с created на installed.

    Статус сервисов кластера после успешной установки
    Статус сервисов кластера после успешной установки
Особенности установки Hive

 
Компонент Metastore сервиса Hive требует предварительной установки базы данных MySQL/MariaDB и наличия доступов к ней. Сервис MariaDB входит в состав бандла ADH. Таким образом, можно установить и настроить MariaDB через ADCM.

Кроме установки и настройки базы данных MariaDB, необходимо настроить доступ к ней со стороны сервиса Hive. Простейший пример предоставления доступов с использованием команды GRANT приведен ниже:

GRANT ALL ON *.* TO 'root'@'<metastore_fqdn>' identified by '<password>' WITH GRANT OPTION;

 — где <metastore_fqdn> и <password> должны быть заменены соответствующими данными сервера MariaDB (FQDN и пароль).

Настроить адрес и учетные данные для подключения к базе данных можно на этапе конфигурирования сервиса Hive.

Нашли ошибку? Выделите текст и нажмите Ctrl+Enter чтобы сообщить о ней