为什么会用docker 来搭建hadoop集群的原因不必细说: 看实战!
第一步: 构建我们搭建集群所需的镜像
Dockerfile:如下
FROM hub.c.163.com/public/centos:7.2.1511 ADD jdk-10.0.1_linux-x64_bin.tar.gz /usr/local/ RUN mv /usr/local/jdk-10.0.1 /usr/local/jdk10.0.1 ENV JAVA_HOME /usr/local/jdk10.0.1 ENV PATH $JAVA_HOME/bin:$PATH ADD hadoop-3.0.2.tar.gz /usr/local RUN mv /usr/local/hadoop-3.0.2 /usr/local/hadoop ENV HADOOP_HOME /usr/local/hadoop ENV PATH $HADOOP_HOME/bin:$PATH
网上找的 dockerfile 修改了一下 比较粗暴
有一点需要注意 把下载下来的JDK 和Hadoop和 Dockerfile放在同一个目录下面
执行 docker build -t hadoop 命令进行构建:注意切换到 Dockerfile所在目录
通过这个Dockerfile 构建出来的镜像有3G大小
构建的时间我的机器用了半个小时左右才出来
