Запуск Hadoop в виртуальной среде

Я хотел бы знать, следует ли ожидать проблем при наличии кластера Hadoop на виртуальных, а не на физических машинах?

Меня больше всего беспокоит использование одного и того же жесткого диска, я читал, что я должен рассчитывать на 1-2 контейнера на диск, но в моем случае будет существовать только один диск. Может ли это быть проблемой?


hadoop virtualization yarn
person Kobe-Wan Kenobi    schedule 12.02.2016    source источник
comment
Проверьте это: stackoverflow.com/questions/14930439 /   -  person Mobin Ranjbar    schedule 13.02.2016

Ответы (1)


arrow_upward
0
arrow_downward

Я думаю, это зависит от того, какой размер вы выделяете для контейнеров. Конечно, будет ограничение на количество контейнеров, если у вас есть ограничение на память. Я могу выделить несколько моментов, которые следует учитывать при запуске кластера Hadoop в виртуальной среде:

  1. Конфигурация сети в случае многоузлового кластера
  2. Очевидная производительность приложения
  3. Влияние на масштабируемость из-за ограниченных ресурсов, если вы планируете запускать кластер на хосте с аппаратным обеспечением с низкой конфигурацией.
person akki    schedule 15.02.2016