Ошибка работы автономного спарка

931
bcxuezhe39

Застряли на этой ошибке в течение нескольких дней, отчаянно нуждаюсь в помощи.

Таким образом, в автономном режиме развертывания я пытаюсь запускать образцы заданий, но независимо от того, насколько просто задание (даже запуск spark-shell с подсчетом массива чисел), следующая ошибка просто продолжает появляться (полный цикл циклического журнала Информация):

INFO AppClient$ClientActor: Executor added: app-20150604024526-0001/3 on worker-20150604023842-localhost-54417 (localhost:54417) with 1 cores INFO SparkDeploySchedulerBackend: Granted executor ID app-20150604024526-0001/3 on hostPort localhost:54417 with 1 cores, 512.0 MB RAM  INFO AppClient$ClientActor: Executor updated: app-20150604024526-0001/3 is now RUNNING  INFO AppClient$ClientActor: Executor updated: app-20150604024526-0001/3 is now LOADING  WARN TaskSchedulerImpl: Initial job has not accepted any resources; check your cluster UI to ensure that workers are registered and have sufficient resources  WARN TaskSchedulerImpl: Initial job has not accepted any resources; check your cluster UI to ensure that workers are registered and have sufficient resources  INFO AppClient$ClientActor: Executor updated: app-20150604024526-0001/2 is now EXITED (Command exited with code 1)  INFO SparkDeploySchedulerBackend: Executor app-20150604024526-0001/2 removed: Command exited with code 1  ERROR SparkDeploySchedulerBackend: Asked to remove non-existent executor 2 

Любые идеи или предложения будут высоко оценены! Большое спасибо!

1

0 ответов на вопрос