Команда hadoop fs не работает в моей системе

Я установил один кластерный узел на свой персональный ноутбук. Он успешно установлен, и jps отображает все 5 демонов, но когда я пытаюсь войти поверх hdfs с помощью команды hadoop fs, отображается «команда не найдена».

Может кто-нибудь объяснить, в чем проблема и что мы должны сделать, чтобы запускать команды hdfs?

0
задан 08.03.2016, 15:03

3 ответа

перейдите в каталог установки hadoop

и введите

bin/hadoop fs -ls /

, он вернется с каталогами и файлами, доступными на HDFS

0
ответ дан 08.10.2019, 20:18

Я надеюсь, что стандартный блог, за которым вы следили, установил здесь hadoop: / usr / local / hadoop / bin

ls -l /usr/local/hadoop/bin
root@ashu-700-430qe:/usr/local/hadoop/bin# ls -lrt
total 440
-rwxr-xr-x 1 hduser hadoop   1776 Dec 17 18:52 rcc
-rwxr-xr-x 1 hduser hadoop   7072 Dec 17 18:52 hdfs.cmd
-rwxr-xr-x 1 hduser hadoop  11142 Dec 17 18:52 hdfs
-rwxr-xr-x 1 hduser hadoop   8298 Dec 17 18:52 hadoop.cmd
-rwxr-xr-x 1 hduser hadoop   5479 Dec 17 18:52 hadoop
-rwxr-xr-x 1 hduser hadoop  10895 Dec 17 18:52 yarn.cmd
-rwxr-xr-x 1 hduser hadoop  11380 Dec 17 18:52 yarn
-rwxr-xr-x 1 hduser hadoop 201707 Dec 17 18:52 test-container-executor
-rwxr-xr-x 1 hduser hadoop   5949 Dec 17 18:52 mapred.cmd
-rwxr-xr-x 1 hduser hadoop   5205 Dec 17 18:52 mapred
-rwxr-xr-x 1 hduser hadoop 159223 Dec 17 18:52 container-executor

Если это не так, выясните, где он установлен. Как только вы найдете его.

Then sudo vi /etc/environment 
PATH="/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin:/usr/games:/usr/local/games:/opt/gradle/bin:/usr/local/hadoop/bin"
JAVA_HOME=/usr/lib/jvm/java-8-oracle
export JAVA_HOME
GRADLE_HOME=/opt/gradle-2.10
export GRADLE_HOME

Затем просто добавьте в этот файл hadoop-folder-till-bin-directory.

then source /etc/environment
echo $PATH

эта команда также должна указывать путь к каталогу hadoop bin. Теперь вы можете запускать ваши обычные команды hadoop fs. Надеюсь, это поможет.

0
ответ дан 08.10.2019, 20:18

Может потребоваться следующая команда:

sudo su hduser

, затем

hadoop fs -ls /
-1
ответ дан 08.10.2019, 20:18
  • 1
    Привет, добро пожаловать в askubuntu! 1.) Используйте форматирование блока для команд и дословного вывода или расположением с отступом или включением в обратные галочки. 2.) Я вижу, что Ваш ответ очень похож на уже существующий, но не идентичен, из-за sudo su часть. Я думаю, что было бы полезно добавить, почему переключение на hduser может быть необходимым. – Dang Manh Truong 05.10.2015, 09:33

Теги

Похожие вопросы