Вопросы по теме 'distributed-cache'

Распределенный кэш Hadoop
Я прочитал учебные пособия от Apache и Yahoo по DistributedCache. Я все еще смущен одной вещью, хотя. Предположим, у меня есть файл, который я хочу скопировать на все узлы данных. Итак, я использую DistributedCache.addCacheFile(new...
1338 просмотров
schedule 10.11.2023

EhCache может обрабатывать максимальный размер значения.
Каков максимальный размер значения, которое может храниться в EhCache на всех уровнях хранения (хранилище памяти, хранилище вне кучи, дисковое хранилище)? Мой главный вопрос: подходит ли EhCache для кэширования больших файловых потоков?
1209 просмотров

альтернативные решения для распределенного кэша Hadoop/Hive для обработки очень большого файла словаря?
Мы создаем словарь, подобный приложению на Hadoop и Hive. Общий процесс представляет собой пакетное сканирование миллиардов данных журнала (например, слов) по большому фиксированному словарю (около 100 ГБ, например многоязычному словарю WordNet)....
438 просмотров
schedule 02.11.2023

Обрабатываются ли каталоги символическими ссылками кэша Hadoop?
Я пытаюсь выяснить, поддерживают ли каталоги символические ссылки, созданные кешем Hadoop. Хорошо работает в распределенном режиме Не работает в локальном режиме Javadoc/документация очень скудна и ничего не говорит об этом Укороченная...
400 просмотров
schedule 03.11.2022