阿里云E-MapReduce-使用手册-D

《阿里云E-MapReduce-使用手册-D》由会员上传分享，免费在线阅读，更多相关内容在行业资料-天天文库。

1、E-MapReduce使用手册E-MapReduce/使用手册使用手册集群操作指南创建集群操作指南进入创建集群页面1.进入E-MapReduce管理控制台2.选择左侧【集群】选项卡3.在上方选在所在的区域（Region），所创建集群将会在对应的Region内4.点击【创建集群】创建集群创建集群共分为三步1.配置集群基本信息2.配置软件信息3.配置硬件节点信息配置集群51E-MapReduce/使用手册配置项说明：-基本信息●集群名称：集群的名字，可以使用中文，英文和-,_组成，最短一个字符，最长64个字符。●付费类型：包年包月还是按量付费。和ECS的付费模式一致。如果选择包年

2、包月，需要选择时长。●购买时长：一个月到10个月，1年，2年，3年。和ECS一样买一年送2个月，所以没有11个月和12个月的选择。-运行日志●运行日志：是否保存作业的日志，开启后会需要用户输入用来保存日志的OSS目录位置，会将用户的作业的日志保存到该OSS存储目录上。当然了，用户要使用这个功能必须要开通OSS。同时上传的文件会按照使用的量来计算用户的费用。强烈建议保存日志，在排查错误的时候极其有用。●日志路径：保存日志的OSS路径登录设置●登录密码：8-30个字符，且同时包含三项（大、小写字母，数字和特殊符号）●公网状态：默认集群会配备公网（默认使用8MB的带宽，按量付费）。

3、集群一旦创建完成后，可以在集群详情页面查看申请到的公网Ip。使用这个公网Ip来登录集群引导操作，可以在集群启动hadoop前执行您自定义的脚本（可选）。详细使用说明查看引导操作51E-MapReduce/使用手册-产品版本：E-MapReduce产品的主要版本，代表了一整套的开源软件环境，会定时的根据内部组成软件的升级进行升级。一般如果Hadoop相关的软件有进行升级，E-MapReduce也会升级，这个时候就会升级这个主版本号。一般低版本的集群无法升级到一个高版本。目前正在使用的是2.0.0版本-集群类型：自2.0.0版本开始，集群不再明确的区分类型。都是Hadoop集群。

4、只是内部的服务不同。-包含配置：展示选择的集群类型下的所有的软件组件列表，包括名称和版本号。对于不同的需要，请选择不同的组件。被选中的组件会默认启动相关的服务进程。-软件配置（可选）详细使用方法参考软件配置说明51E-MapReduce/使用手册-集群网络配置●可用区：在每个Region内存在多个可用区（Zone），可以指定可用区来进行创建。也可以采用随机分配的方式创建，随机的方式会随机的把每一个节点分散在任意的一个zone内。Zone的具体解释参考ECS可用区。zone在物理上属于不同的区域，一般来说如果需要较好的网络，推荐手动选择一个指定的zone，但是这样也会导致创建集

5、群失败的风险增大。因为单个zone的存库不一定那么充足。●网络：可以选择经典网络和专有网络(VPC)，专有网络需要额外提供所属VPC以及子网(交换机)，若还未创建，可点击页面上创建VPC/子网（交换机）进入VPC的控制台进行创建，完成后点击刷新列表即可看到新创建的VPC/子网（交换机），EMR专有网络详细使用说明查看专有网络●新建安全组：如果打开，那么就需要输入新建的安全组的名字●所属安全组：集群所属的安全组。这里只展示用户在E-MapReduce产品中创建的安全组。因为一些安全的原因目前尚不支持选择在E-MapReduce外创建的安全组。如果需要新建安全组，可以选择"新建安

6、全组"选项，同时输入安全组的名字完成新建。-集群节点配置●集群模式：默认为非高可用模式，Master节点数量为1；若开启高可用模式，Master节点数量为2（EMR-1.3.0版本开始提供）●节点配置：ECS的机型选择，参考ECS机型列表。考虑到实际的效果，E-MapReduce从中选取了部分机型。●节点数据盘类型：集群的节点使用的数据盘类型，数据盘有3种类型，普通云盘，高效云盘，SSD云盘。根据不同机型和不同的Region，会有不同。当用户选择不同的区的时候，该区支持什么盘，下拉框就会展示什么类型的盘。数据盘默认设置为随着集群的释放而释放。●节点数据盘容量：目前我们的集群推

7、荐容量最小是40G单机，最大是8000G单机。●节点数量：需要的总的节点的台数，数字。集群至少需要3台(高可用集群需增加1个Master节点，至少4台)。目前最大台数是50台，如果需要超过50台，请联系我们。购买清单和价格预估：根据付费类型的不同，会展示不同的价格信息如果是包年包月的就会展示51E-MapReduce/使用手册若是按量付费的就是确认创建当所有的信息都有效填写以后，"完成创建"按钮会亮起确认无误后点击【完成创建】将会创建集群。注意事项集群除了名字以外，一旦创建出来就无法被修改。所以在创建的