Установка Spark/Zeppelin на автономный узел

У меня есть кластер Cloudera, которым управляет команда администраторов. Однако в кластере не установлен Zeppelin.

Я хотел бы установить Zeppelin на отдельную ноду и подключиться к кластеру Cloudera?

Возможно ли установить zeppelin на узел, который не является частью кластера, и отправить ему искровые задания?

Любая ссылка действительно ценится?

Спасибо


person Mukund    schedule 17.10.2018    source источник
comment
Да, это возможно. Помните, что вы должны правильно установить адрес Yarn (Spark Master) и другие параметры в настройках вашего интерпретатора.   -  person Soheil Pourbafrani    schedule 17.10.2018


Ответы (1)


Zeppelin — это еще один клиент Spark.

Например, на машине, на которой вы хотите использовать Zeppelin, вы должны сначала убедиться, что spark shell и spark submit работают должным образом, тогда конфигурация Zeppelin станет намного проще.

Простым способом управления этим было бы использование администраторами Cloudera Manager для установки клиентских библиотек Spark (а также Hive и Hadoop) в этот автономный узел, а затем я предполагаю, что они предоставят вам доступ по SSH или вы сообщите им, как его установить.

person OneCricketeer    schedule 17.10.2018