Вопросы по теме 'kryo'

Увеличьте размер буфера на сервере/клиенте в Kryonet.
Как увеличить размер буфера в конструкторе сервер/клиент в Kryonet?
2492 просмотров
schedule 12.12.2023

Работа с несовместимым изменением версии фреймворка сериализации
Описание проблемы У нас есть кластер Hadoop, в котором мы храним данные, сериализованные в байты с помощью Kryo (инфраструктура сериализации). Версия Kryo, которую мы использовали для этого, была создана из официального релиза 2.21 для...
3902 просмотров
schedule 24.12.2023

Обработка классов кейсов в twitter chill (интерфейс Scala для Kryo)?
Twitter-chill выглядит как хорошее решение проблемы эффективной сериализации в Scala без излишнего шаблонного кода. Однако я не вижу никаких доказательств того, как они обрабатывают классы case. Это просто работает автоматически или что-то нужно...
2155 просмотров
schedule 17.03.2024

Хранить крио-объект в скомпилированном банке?
У меня есть HashMap , к которому я хотел бы сохранить и иметь быстрый доступ. Я использую Kryo для сериализации объекта Kryo kryo = new Kryo(); MapSerializer serializer = new MapSerializer(); kryo.register(Location.class);...
189 просмотров
schedule 13.12.2022

Ошибка сериализации Spark Kryo
У меня есть фрагмент кода Spark, который работал на Spark 1.3, но не работает, когда я перемещаю его на Spark 1.5.2 (обновление кластера вне моего контроля). Неисправность выглядит следующим образом: Caused by: java.io.NotSerializableException:...
810 просмотров
schedule 31.10.2022

Kryo десериализация HashMap не работает с Spark
У меня есть класс Java, в котором есть несколько полей String и одно поле HashMap . Я сериализую объекты этого класса с сериализацией Kryo по умолчанию и сохраняю их в HBase. После чтения их в памяти десериализация в flatMap функции RDD в...
955 просмотров

Метод Java readInt возвращает LittleEndian, а не BigEndian значение Int в Scala
Я использую Kryo для десериализации класса, изначально сериализованного в Spark. Kryo записывает все свои примитивы в формате BigEndian, но когда я пытаюсь десериализовать значения на другом компьютере, значение возвращается, как если бы оно было...
102 просмотров
schedule 23.10.2022