如何在ubuntu中从命令行创建amazonemr集群?我有私钥、访问密钥和pem文件?…有人能指导我如何从命令行运行单词计数示例吗
sg3maiej1#
为此,可以使用aws命令行工具(cli)。http://docs.aws.amazon.com/cli/latest/userguide/installing.html一旦安装了这些,就必须使用“aws configure”命令配置工具,并输入priate key、access key。http://docs.aws.amazon.com/cli/latest/userguide/cli-chap-getting-started.html您还需要输入您的emr集群(和其他资源)将启动的区域。要创建集群,需要使用“create cluster”命令。http://docs.aws.amazon.com/cli/latest/reference/emr/create-cluster.html这些步骤不需要pem文件。一旦集群启动,您就可以作为一个“步骤”运行wordcount演示。您可以添加字数演示作为“步骤”启动群集并运行hadoop作业(本例中为脚本):http://docs.aws.amazon.com/elasticmapreduce/latest/developerguide/emr-hadoop-script.html对于已经运行的集群,本节提供了一些添加步骤的示例:http://docs.aws.amazon.com/elasticmapreduce/latest/developerguide/usingemr_s3distcp.html
1条答案
按热度按时间sg3maiej1#
为此,可以使用aws命令行工具(cli)。http://docs.aws.amazon.com/cli/latest/userguide/installing.html
一旦安装了这些,就必须使用“aws configure”命令配置工具,并输入priate key、access key。
http://docs.aws.amazon.com/cli/latest/userguide/cli-chap-getting-started.html
您还需要输入您的emr集群(和其他资源)将启动的区域。
要创建集群,需要使用“create cluster”命令。http://docs.aws.amazon.com/cli/latest/reference/emr/create-cluster.html
这些步骤不需要pem文件。
一旦集群启动,您就可以作为一个“步骤”运行wordcount演示。您可以添加字数演示作为“步骤”
启动群集并运行hadoop作业(本例中为脚本):http://docs.aws.amazon.com/elasticmapreduce/latest/developerguide/emr-hadoop-script.html
对于已经运行的集群,本节提供了一些添加步骤的示例:http://docs.aws.amazon.com/elasticmapreduce/latest/developerguide/usingemr_s3distcp.html