Вопросы по теме 'apache-zeppelin'

Не удалось запустить задачу: сбой установки «bower --allow-root»
Я пытаюсь собрать Apache zeppelin из исходного кода. Но он ломается на "zeppelin-web" со следующей ошибкой [ERROR] Failed to execute goal com.github.eirslett:frontend-maven-plugin:0.0.23:bower (bower install) on project zeppelin-web: Failed to...
3201 просмотров

Zeppelin - не удается запросить с помощью %sql таблицу, которую я зарегистрировал в pyspark
Я новичок в spark/zeppelin, и я хотел выполнить простое упражнение, в котором я преобразую CSV-файл из pandas в фрейм данных Spark, а затем зарегистрирую таблицу, чтобы запросить ее с помощью sql и визуализировать ее с помощью Zeppelin. Но я,...
9618 просмотров

Цеппелин со искрой не отображает фрейм данных в виде таблицы
В документации интерпретатора zeppelin R указано: If you return a data.frame, Zeppelin will attempt to display it using Zeppelin's built-in visualizations. Это можно увидеть в примере документации: Однако, когда я пытаюсь запустить...
1338 просмотров
schedule 06.02.2024

Конфигурация Zeppelin: есть ли где-то кеш?
Похоже, я что-то упустил в том, как Zeppelin считывает конкретную конфигурацию интерпретатора. Например, я установил spark.cores.max на 12 в zeppelin-env.sh и spark-defaults.sh в $SPARK_HOME/conf , но запуск интерпретатора Spark запускал...
1900 просмотров
schedule 07.03.2024

Как настроить Livy/spark для Zeppelin?
Я успешно настроил Zeppelin со Spark. Однако я хочу использовать мультиарендность, и для этого я хочу настроить Zeppelin с Livy и Spark. Для Ливи я предоставил следующие два пути export SPARK_HOME=/opt/cloudera/parcels/CDH/lib/spark export...
843 просмотров

Apache Zeppelin (Shiro Security) не может сохранять разрешения для заметок
Я новичок в Zeppelin. Я следил за этим руководством по настройке аутентификации в Zeppelin и создал две учетные записи. Это мой файл conf shiro.ini: [users] # List of users with their password allowed to access Zeppelin. # To use a different...
714 просмотров
schedule 15.12.2023

Синтаксическая ошибка при попытке запустить zeppelin, искрить с помощью python в ubuntu
Я установил искру и цеппелин, и у меня возникли проблемы с запуском цеппелина. Всякий раз, когда я пытаюсь запустить сценарий оболочки с помощью этой команды sh zeppelin-daemon.sh start , я получаю эту ошибку. sh zeppelin-daemon.sh start...
856 просмотров

Приложение Kill Spark, используемое Zeppelin на YARN после X времени бездействия
Запуск Spark на YARN с Apache Zeppelin занимает X% очереди, даже если на самом деле ее никто не использует. Поскольку я выполняю ночные задания CRON, я хотел бы убить/закрыть/выйти из приложения Zeppelin Spark через X минут бездействия, чтобы...
659 просмотров
schedule 29.11.2022

Как создать фильтр безопасности для пользовательского интерфейса Spark в Spark на YARN
Среда : AWS EMR, кластер пряжи. Описание : я пытаюсь использовать java-фильтр для защиты доступа к интерфейсу spark, используя свойство spark.ui.filters; проблема в том, что когда искра работает в режиме пряжи, это свойство всегда...
493 просмотров
schedule 10.06.2024

Принудительный запуск кластера H2O Sparkling Water на определенной машине в режиме YARN
Используемые инструменты: Искра 2 Газированная вода (H2O) Блокнот Цеппелинга Pyspark-код Я запускаю H2O во ВНУТРЕННЕМ режиме с моего ноутбука Zeppelin, так как моя среда — YARN. Я использую основную команду: from pysparkling...
118 просмотров

Создайте SparkSession
У меня есть искра в качестве переводчика в Zeppelin. Я использую Spark2.0, я создал Session: Create
618 просмотров
schedule 27.03.2024

Производительность искры не повышается
Я использую Zeppelin для чтения avro-файлов размером в ГБ и записи в миллиардах. Я пытался использовать 2 экземпляра и 7 экземпляров на AWS EMR , но производительность кажется одинаковой. С экземплярами 7 это все еще занимает много времени....
97 просмотров
schedule 16.02.2024

ImportError: Нет модуля с именем pandas в Zeppelin (EMR)
У меня есть кластер EMR со Spark/Hive/Zeppelin. В своем блокноте Zeppelin я попытался импортировать панд: import pandas as pd Но я получил эту ошибку: ImportError: No module named pandas Как я могу решить эту проблему? Это потому,...
1629 просмотров
schedule 02.11.2022

дирижабль | 0.8.0 | Отключить гелий
Мы запускаем Zeppelin на док-контейнерах в закрытой корпоративной среде. Когда Zeppelin запускается, он пытается подключиться к AWS, время ожидания истекает через некоторое время, но успешно запускается. Трассировка журнала ниже - INFO...
856 просмотров
schedule 02.06.2024

Ignite On Spark: ошибка при попытке сохранить фрейм данных искры в Ignite
Я пытаюсь использовать зажигание поверх искры и запускаю несколько тестов, чтобы узнать, полезно ли это для нашего конкретного случая использования. Возможность запустить узел Ignite, используя приведенный ниже код. Любая помощь горячо...
606 просмотров
schedule 03.05.2024

Установка Spark/Zeppelin на автономный узел
У меня есть кластер Cloudera, которым управляет команда администраторов. Однако в кластере не установлен Zeppelin. Я хотел бы установить Zeppelin на отдельную ноду и подключиться к кластеру Cloudera? Возможно ли установить zeppelin на узел,...
106 просмотров
schedule 06.03.2024

Могу ли я использовать нажатие кнопки для запуска заметки Zeppelin вместо того, чтобы запускать ее при вводе текста?
Итак, я использую элементы управления, такие как z.input , для ввода пользовательского ввода в заметку Spark, которую я обычно публикую для других пользователей. Проблема с Zeppelin заключается в том, что если он видит, что я не ввожу символ в...
597 просмотров
schedule 02.11.2023

Блокнот Zeppelin не поддерживает метод многоугольника листовки
Я работаю над ноутбуком Zeppelin со Spark. Я использую Leaflet для создания визуализации карты, а также для создания многоугольника. Это пример, который я хочу запустить на ноутбуке Zeppelin: %angular <!DOCTYPE html>...
191 просмотров
schedule 09.05.2024

Передать и обработать массив из JS в Spark в Zeppelin
Мне нужно визуализировать некоторые карты в Zeppelin с помощью искры и JS (в данном случае углового интерпретатора). В Zeppelin есть эта функция привязки, но она дает немного знания об использовании. Я хотел бы нажать на кнопку, оценить...
246 просмотров

Предоставление всем пользователям доступа к ноутбукам Zeppelin через IP-адрес
Я выполнил все шаги, указанные в документации , чтобы установить Zeppelin. . Я создал блокнот, которым хочу поделиться с командой. Я предоставил только URL-адрес записной книжки: http://172.11.2.33:8080/#/notebook/2ESDVJJEX Но члены моей...
596 просмотров
schedule 09.11.2022