MapReduce CLI
Все MapReduce-команды вызываются скриптом bin/mapred. Запуск скрипта mapred без аргументов выводит описание для всех команд.
Использование скрипта показано ниже:
$ mapred [SHELL_OPTIONS] COMMAND [GENERIC_OPTIONS] [COMMAND_OPTIONS]В Hadoop есть инфраструктура парсинга параметров, в которой используются общие параметры анализа, а также запуск классов.
| Параметры команды | Описание |
|---|---|
SHELL_OPTIONS |
Общие shell-параметры |
GENERIC_OPTIONS |
Общие shell-параметры, поддерживаемые несколькими командами |
COMMAND_OPTIONS |
Различные команды с параметрами |
Пользовательские команды
| Команда | Описание |
|---|---|
Создает Hadoop-архив |
|
Объединяет логи YARN в Hadoop-архив |
|
Выводит classpath |
|
Используется для копирования больших файлов и каталогов внутри и между кластерами |
|
Позволяет работать с MapReduce-задачами |
|
Запускает pipe-задачу |
|
Позволяет взаимодействовать с очередями и получать информацию об очередях задач |
|
Выводит текущую версию Hadoop |
|
Выводит вычисленные переменные окружения Hadoop |