Полезные команды оболочки Hadoop



В этом блоге описаны все полезные команды оболочки Hadoop. Наряду с командами оболочки Hadoop в нем также есть снимки экрана, упрощающие обучение. Читать дальше!

HDFS означает ' ЧАС Adoop D распределяется F с участием S система. HDFS - это подпроект проекта Apache Hadoop. Этот проект Apache Software Foundation предназначен для создания отказоустойчивой файловой системы, предназначенной для работы на стандартном оборудовании. Доступ к HDFS осуществляется с помощью набора команд оболочки, которые будут обсуждаться в этом посте.





Небольшое примечание перед началом: все команды Hadoop Shell вызываются скриптом bin / hadoop.

Команды пользователя:

  • Запустите файловую систему DFS:

Использование: hadoop fsck - /



Запустить-файловую-систему-DFS (1)

  • C чертовски версия Hadoop :

Использование: версия Hadoop



Команды оболочки FS:

Команда Hadoop fs запускает общий пользовательский клиент файловой системы, который взаимодействует с файловой системой MapR (MapR-FS).

  • Просмотреть списки файлов:

Использование: hadoop fs -ls hdfs: /

  • Проверить состояние памяти:

Использование: hadoop fs -df hdfs: /

  • Количество каталогов, файлов и байтов в указанном пути и шаблоне файла:

Использование: hadoop fs -count hdfs: /

  • Переместить файл из одного места в другое:

Использование: -mv

  • Копировать файл из источника в место назначения :

Использование: -cp

  • Удалить файл:

Использование: -rm

как выйти из метода в java

  • Поместите файл из локальной файловой системы в распределенную файловую систему Hadoop:

Использование: -ввод…

  • Скопируйте файл из Local в HDFS:

Использование: -copyFromLocal…

как сделать глубокую копию в java
  • Просмотр файла в распределенной файловой системе Hadoop :

Использование: -cat

Команды администрирования:

  • Отформатируйте цель :

Использование: hadoop назначение -format

  • Стартовые вторичные цели:

Использование: hadoop secondrynamenode

  • Бежать специально :

Использование: цель hadoop

  • Бегать узел данных :

Использование: hadoop datanode

  • Балансировка кластера :

Использование: балансировщик hadoop

  • Запустите узел отслеживания заданий MapReduce:

Использование: трекер вакансий hadoop

  • Запустите узел отслеживания задач MapReduce:

Использование: программа отслеживания задач hadoop

Есть вопрос к нам? Укажите их в комментариях, и мы свяжемся с вами.

Похожие сообщения:

Операторы в Apache Pig