Порт Hadoop 50070 используется Ошибка установки Windows

Я новичок в Hadoop и пытаюсь создать автономный кластер Hadoop в Windows. Я получаю сообщение об ошибке при запуске узла имени, как показано ниже. Однако при проверке в Windows процесса, использующего порт 50070, я не смог найти ни одного процесса.

Ошибка Hadoop:

20/04/18 08:32:24 ERROR namenode.NameNode: Failed to start namenode.
java.net.BindException: Port in use: 0.0.0.0:50070
        at org.apache.hadoop.http.HttpServer2.openListeners(HttpServer2.java:919)
        at org.apache.hadoop.http.HttpServer2.start(HttpServer2.java:856)
        at org.apache.hadoop.hdfs.server.namenode.NameNodeHttpServer.start(NameNodeHttpServer.java:142)
        at org.apache.hadoop.hdfs.server.namenode.NameNode.startHttpServer(NameNode.java:752)
        at org.apache.hadoop.hdfs.server.namenode.NameNode.initialize(NameNode.java:638)
        at org.apache.hadoop.hdfs.server.namenode.NameNode.<init>(NameNode.java:811)
        at org.apache.hadoop.hdfs.server.namenode.NameNode.<init>(NameNode.java:795)
        at org.apache.hadoop.hdfs.server.namenode.NameNode.createNameNode(NameNode.java:1488)
        at org.apache.hadoop.hdfs.server.namenode.NameNode.main(NameNode.java:1554)
Caused by: java.net.BindException: Address already in use: bind
        at sun.nio.ch.Net.bind0(Native Method)
        at sun.nio.ch.Net.bind(Net.java:433)
        at sun.nio.ch.Net.bind(Net.java:425)
        at sun.nio.ch.ServerSocketChannelImpl.bind(ServerSocketChannelImpl.java:223)
        at sun.nio.ch.ServerSocketAdaptor.bind(ServerSocketAdaptor.java:74)
        at org.mortbay.jetty.nio.SelectChannelConnector.open(SelectChannelConnector.java:216)
        at org.apache.hadoop.http.HttpServer2.openListeners(HttpServer2.java:914)
        ... 8 more
20/04/18 08:32:24 INFO util.ExitUtil: Exiting with status 1
20/04/18 08:32:24 INFO namenode.NameNode: SHUTDOWN_MSG:

Проверка порта Windows:

λ netstat -ano | findstr :50070

C:\работа\hadoop-2.7.2\sbin

Может ли кто-нибудь помочь решить эту проблему?


person Vincent Kr    schedule 18.04.2020    source источник
comment
Почему вы не используете последнюю стабильную версию Hadoop? Почему бы не использовать Cloudera Quickstart VM?   -  person OneCricketeer    schedule 19.04.2020


Ответы (1)


Доброе утро! Делаем следующее, перед загрузкой докера открываем консоль windows и ищем его рабочие порты командой: net stat -a -n -o

  • -a: отображает все соединения и порты TCP и UDP.
  • -n: отображать номера портов вместо имени.
  • -o: отображает PID.

Таким образом, все, что вам нужно сделать, это убить службу и снова подняться:

Taskkill / PID <pid> / F
person Thaison Lopes    schedule 15.04.2021