Я пытаюсь выяснить, почему приведенная ниже Java не работает, когда я пытаюсь запустить ее на Hadoop. import java.io.IOException; import java.util.HashMap; import java.util.List; import java.util.Map; import org.apache.hadoop.conf.Configuration;...

Я использую Hive в HDinsight и хочу сохранить выходные данные задания в хранилище Azure (большой двоичный объект). Я старался INSERT OVERWRITE DIRECTORY 'wasb://[email protected]/' SELECT name, COUNT(*) as count FROM...

При создании связанного ресурса HDInsight On Demand фабрика данных создает новый контейнер для hdinsight. Интересно, как я могу создать таблицу, указывающую на этот контейнер? Вот мое определение таблицы { "name": "AzureBlobLocation",...

Я сталкиваюсь с той же проблемой, что и в этом потоке, с моим приложением Scala Spark Streaming: Почему задание Spark завершается с ошибкой при слишком большом количестве открытых файлов? Но учитывая, что я использую Azure HDInsights для...

Я столкнулся с двумя основными проблемами, пытаясь заставить мою реализацию фабрики данных работать. Это первое сообщение об ошибке, которое я получил: Failed to create cluster. HttpCode:PreClusterCreationValidationFailure, Error message: Pre...

Является ли единственным способом программно отправить топологию шторма в HDInsight, чтобы пакет был JAR-файлом? В приведенной ниже ссылке упоминается развертывание файла C#, но только с помощью ручного процесса. Если нет, как программно...

В Visual Studio Temple для озер данных HIVE, Pig, Storm предназначены для HDInsight. Но U-Sql не упоминается как предназначенный для HDInsight. Почему это? Как я могу использовать U-Sql для HDInsight?

У нас есть кластер HDInsight с HBase (Ambari) Мы создали таблицу с помощью Pheonix СОЗДАТЬ ТАБЛИЦУ, ЕСЛИ НЕ СУЩЕСТВУЕТ Результаты (Col1 VARCHAR (255) NOT NULL, Col1 INTEGER NOT NULL, Col3 INTEGER NOT NULL, Destination VARCHAR (255) NOT...

Я новичок в Spark и HDInsight. Мне интересно, как работает приведенный ниже код? Я имею в виду, как задания планируются между узлами кластера. предположим, у меня есть 2 головных узла и 4 рабочих узла, какие коды будут работать на головных узлах и...

Я автоматизирую создание кластеров HDInsight. Я могу создавать кластеры. Однако шаблон создает учетные записи ADMIN. Мы используем Ambari для создания учетных записей USER вручную, но хотели бы автоматизировать это. Я думаю, что смогу включить...