Свързани въпроси 'avro'
schedule
05.06.2024
Потребителят на Flink kafka не можа да десериализира avro данни от kafka
нов съм в използването на apache Flink, опитах се да използвам avro данни във Flink с помощта на ConfluentAvroDeserializer, но когато стартирам програмата и създам някои данни на kafka с помощта на kafka-avro-console-producer програмата показва грешки...
81 изгледи
schedule
01.10.2022
Генериране на avro схема с незадължителни стойности
Опитвам се да напиша много лесна схема на avro (лесна, защото просто посочвам текущия си проблем), за да напиша файл с данни на avro въз основа на данни, съхранени във формат json. Номерът е, че едно поле не е задължително и едно от avrotools или аз...
7699 изгледи
schedule
04.11.2022
Как да четете множество типове данни на Avro в един MapReduce
Имам два различни типа данни на Avro, които имат някои общи полета. Искам да прочета тези общи полета в картата. Искам да прочета това, като създам едно задание в клъстер.
По-долу е примерната avro схема
Схема 1:...
1545 изгледи
schedule
23.10.2022
Avro файлов тип за изображения?
Опитвам се да...разбера този случай в Hadoop.
Кой е най-добрият файлов формат Avro или SequenceFile, в случай че съхранявате изображения в HDFS и ги обработвате след това с Python?
SequenceFile са ориентирани към ключ-стойност, така че мисля, че...
933 изгледи
schedule
15.01.2024
Кафка и разнородните послания
Правех проучване за Кафка и Авро и имам въпрос как да обработвам разнородни съобщения с Кафка .
Нека си представим, че имаме две схеми на Avro : EmailSent и UserLoggedIn . Кой е най-добрият начин с Кафка да ги консумирате?
Създаване...
235 изгледи
schedule
10.11.2023
анализ на потока „Невалиден формат на Avro, изтрийте невалиден запис.“
Опитвам се да сериализирам моите C# класове в „Avro“, като използвам „Microsoft Avro Library“ и го изпращам до центъра за събития. Въпреки това, когато се опитвам да прочета данните чрез поточен анализ, това дава тази грешка в регистрационните...
690 изгледи
schedule
09.02.2024
Рамка за сериализиране на данни
Нов съм в този Apache Avro (рамка за сериализация). Знам какво е сериализация, но защо има отделни рамки като avro, thrift, протоколни буфери и
Защо не можем да използваме API за сериализация на Java вместо тези отделни рамки, има ли...
3480 изгледи
schedule
09.04.2024