Вопросы по теме 'livy'
Как настроить Livy/spark для Zeppelin?
Я успешно настроил Zeppelin со Spark. Однако я хочу использовать мультиарендность, и для этого я хочу настроить Zeppelin с Livy и Spark.
Для Ливи я предоставил следующие два пути
export SPARK_HOME=/opt/cloudera/parcels/CDH/lib/spark
export...
843 просмотров
schedule
30.09.2022
Отправка искровых заданий через livy с помощью curl
Я отправляю задания искры в сеансе livy (0.6.0) через Curl
Задания представляют собой большой файл jar, который точно так же расширяет интерфейс задания:
На самом деле при запуске этого кода с помощью этой команды curl:
curl -X POST -d...
2456 просмотров
schedule
13.12.2023
В AWS EMR Jupyter Notebook, как изменить пользователя с livy на hadoop
Я создал кластер AWS EMR и загрузил,
sparkify_log_small.json
И создал EMR Jupyter Notebook с приведенным ниже кодом, думая, что он будет читать из домашнего каталога пользователя ( hadoop ).
sparkify_log_data = "sparkify_log_small.json"...
724 просмотров
schedule
28.11.2023