как создать кластер Amazon EMR из командной строки в Ubuntu? У меня есть закрытый ключ, ключ доступа и файл pem? .... Может ли кто-нибудь помочь мне, как запустить пример подсчета слов из командной строки
как создать кластер Amazon EMR из командной строки в Ubuntu?
Ответы (1)
Для этого можно использовать инструменты командной строки AWS (CLI). http://docs.aws.amazon.com/cli/latest/userguide/installing.html
После их установки вам необходимо настроить инструмент с помощью команды «aws configure» и ввести закрытый ключ, ключ доступа.
http://docs.aws.amazon.com/cli/latest/userguide/cli-chap-getting-started.html
Вам также нужно будет указать регион, в котором будет запущен ваш кластер EMR (и другие ресурсы).
Чтобы создать кластер, необходимо использовать команду create-cluster. http://docs.aws.amazon.com/cli/latest/reference/emr/create-cluster.html
Вам не нужен файл pem для этих шагов.
После запуска кластера вы можете запустить демонстрацию подсчета слов в качестве «шага». Вы можете добавить демонстрацию подсчета слов в качестве «шага».
Запуск кластера и запуск задания Hadoop (в данном случае сценария): http://docs.aws.amazon.com/ElasticMapReduce/latest/DeveloperGuide/emr-hadoop-script.html
В этом разделе приведены некоторые примеры действий по добавлению для уже работающего кластера: http://docs.aws.amazon.com/ElasticMapReduce/latest/DeveloperGuide/UsingEMR_s3distcp.html