как создать кластер Amazon EMR из командной строки в Ubuntu?

как создать кластер Amazon EMR из командной строки в Ubuntu? У меня есть закрытый ключ, ключ доступа и файл pem? .... Может ли кто-нибудь помочь мне, как запустить пример подсчета слов из командной строки


person letsBeePolite    schedule 19.12.2014    source источник


Ответы (1)


Для этого можно использовать инструменты командной строки AWS (CLI). http://docs.aws.amazon.com/cli/latest/userguide/installing.html

После их установки вам необходимо настроить инструмент с помощью команды «aws configure» и ввести закрытый ключ, ключ доступа.
http://docs.aws.amazon.com/cli/latest/userguide/cli-chap-getting-started.html

Вам также нужно будет указать регион, в котором будет запущен ваш кластер EMR (и другие ресурсы).

Чтобы создать кластер, необходимо использовать команду create-cluster. http://docs.aws.amazon.com/cli/latest/reference/emr/create-cluster.html

Вам не нужен файл pem для этих шагов.

После запуска кластера вы можете запустить демонстрацию подсчета слов в качестве «шага». Вы можете добавить демонстрацию подсчета слов в качестве «шага».

Запуск кластера и запуск задания Hadoop (в данном случае сценария): http://docs.aws.amazon.com/ElasticMapReduce/latest/DeveloperGuide/emr-hadoop-script.html

В этом разделе приведены некоторые примеры действий по добавлению для уже работающего кластера: http://docs.aws.amazon.com/ElasticMapReduce/latest/DeveloperGuide/UsingEMR_s3distcp.html

person user1452132    schedule 20.12.2014