如何学习阿里云 E-MapReduce

时间:2022-09-13 18:26:13

E-MapReduce 是构建于阿里云 ECS 弹性虚拟机之上,利用开源大数据生态系统,包括 Hadoop、Spark、Kafka、Storm,为用户提供集群、作业、数据等管理的一站式大数据处理分析服务。

在创建 E-MapReduce 之前,您需要先完成以下准备工作:

  1. 注册阿里云账号

    在申请 E-MapReduce 集群之前,您需要一个阿里云的云账号用于标识您在整个阿里云生态系统中的身份。该账号不仅可以用来申请 E-MapReduce 集群,同时还能够开通阿里云的对象存储服务 OSS云数据库 RDS等服务。

    如果您还没有阿里云的云账号,请参见注册云账号进行申请。

  2. 创建 AccessKey(可选)

    由于 E-MapReduce 调用访问的需要,您至少需要创建一个 AccessKey,创建步骤如下:

    1. 登录阿里云官网

    2. 登录管理控制台。

    3. 单击 AccessKeys

      注意:若出现如下提示框,请单击继续使用 AccessKey

  1. 开通阿里云 OSS 服务

    E-MapReduce 会将您的作业日志和运行日志保存在您的阿里云 OSS 存储空间中,所以需要您开通阿里云 OSS 服务,操作步骤请参见开通 OSS 服务。并在您期望创建集群的相同地域创建Bucket,参见创建Bucket

  2. 开通高配机型(可选)

    如果您需要在按量的集群中使用8核及8核以上的机型时,需要先在ECS处申请开通。申请高配机型

  3. 准备足够的余额

    目前根据阿里云 ECS 的规则,用户在购买按量付费 ECS 的时候,要保证阿里云账户中至少有 100 元的现金(注意:代金券无效)。因此,在创建按量集群前,请确认您的账户中已至少充值 100 元,否则会创建失败。前往充值

    当您使用完成并释放集群以后,在没有ECS或者其他按量产品在使用的情况下,您可以将这100元提现,回到您自己的原有账户中。

  4. 阅读原文相关教学