Все мастера не отвечают! ? Мастер Spark не отвечает архитектуре datastax

Пробовали использовать как оболочку Spark, так и отправку Spark, получая это исключение?

Initializing SparkContext with MASTER: spark://1.2.3.4:7077
    ERROR 2015-06-11 14:08:29 org.apache.spark.scheduler.cluster.SparkDeploySchedulerBackend: Application has been killed. Reason: All masters are unresponsive! Giving up.
    WARN  2015-06-11 14:08:29 org.apache.spark.scheduler.cluster.SparkDeploySchedulerBackend: Application ID is not initialized yet.
    ERROR 2015-06-11 14:08:30 org.apache.spark.scheduler.TaskSchedulerImpl: Exiting due to error from cluster scheduler: All masters are unresponsive! Giving up.

apache-spark spark-streaming datastax-java-driver datastax datastax-enterprise
person Rajkumar Cj    schedule 11.06.2015    source источник

Ответы (1)


arrow_upward
1
arrow_downward

Убедитесь, что URL-адрес мастера указан правильно и что мастер все еще жив.

Вы можете проверить, каким должен быть правильный URL-адрес, перейдя в веб-интерфейс spark в своем браузере. Если вы запускаете мастер локально, попробуйте ввести localhost:8080 в любом окне браузера.

Подробнее о веб-интерфейсе: https://spark.apache.org/docs/1.2.0/monitoring.html

person Lev Stefanovich    schedule 15.07.2015