【发布时间】:2018-10-04 05:48:50
【问题描述】:
我需要为 Spark 作业创建一个 AWS EMR 集群,其中包含一个主节点和 4 个具有 Auto Scaling 的核心节点。我需要为安装了 Ubuntu 16.0 的 master 和 core 提供不同的实例类型。所以我需要为这个主从创建两个 AMI。
【问题讨论】:
标签: amazon-web-services amazon-emr amazon-ami
我需要为 Spark 作业创建一个 AWS EMR 集群,其中包含一个主节点和 4 个具有 Auto Scaling 的核心节点。我需要为安装了 Ubuntu 16.0 的 master 和 core 提供不同的实例类型。所以我需要为这个主从创建两个 AMI。
【问题讨论】:
标签: amazon-web-services amazon-emr amazon-ami
Amazon EMR 拥有自己的 AMI 库。您可以在启动集群时选择 AMI 版本。
您可以创建自定义 AMI,但它必须基于 Amazon Linux。
见:Using a Custom AMI - Amazon EMR
如果您希望使用自己的 Ubuntu AMI 启动 Hadoop 集群,则不能使用 Amazon EMR 服务。您需要在 Amazon EC2 实例上自行启动和配置它。
【讨论】: