Hadoop-Установка-Многоузловой

Привет всем, я пытаюсь установить многоузловую установку Hadoop. Все работает нормально, но мой менеджер узлов для пряжи не работает. Когда я посмотрел файл журнала Yarn nodemanager, я получил следующую информацию:

«org.apache.hadoop.yarn.server.nodemanager.NodeStatusUpdaterImpl: инициализированный диспетчер узлов для нуля: физическая-память = -1 виртуальная память = -2 виртуальных ядра = -1»

Я понятия не имею, почему он не показывает реальную память и виртуальное ядро. Моя виртуальная машина имеет 8 ГБ памяти и 8 вольтовых процессоров. Из-за вышеуказанных значений я получаю эту ошибку:

«org.apache.hadoop.yarn.exceptions.YarnRuntimeException: получен сигнал SHUTDOWN от Resourcemanager, регистрация NodeManager не удалась, сообщение от ResourceManager: NodeManager из SFeUbuntuVM2 не удовлетворяет минимальным выделениям, отправка сигнала SHUTDOWN в NodeManager»

Может ли кто-нибудь помочь мне с этой проблемой?


hadoop hadoop-partitioning hadoop2 hadoop-streaming
person buildengineer    schedule 06.09.2017    source источник

Ответы (1)


arrow_upward
1
arrow_downward

Проверьте, есть ли у вас

  1. Селинукс отключен
  2. брандмауэр отключен

Проверьте свои файлы конфигурации.

mapred-site.xml

<property>
    <name>mapreduce.framework.name</name>
    <value>yarn</value>
</property>

yarn-site.xml

<property>
    <name>yarn.resourcemanager.hostname</name>
    <value>{your host name}</value>
</property>

В конце концов, отформатируйте свой namenode и снова запустите все службы.

person matesio    schedule 27.09.2017