docker-hadoop-cluster:Docker上的多节点集群以进行自我开发

时间:2024-05-22 17:17:52
【文件属性】:

文件名称:docker-hadoop-cluster:Docker上的多节点集群以进行自我开发

文件大小:37KB

文件格式:ZIP

更新时间:2024-05-22 17:17:52

docker hadoop Shell

docker-hadoop-集群 Docker上的多节点集群,用于自我开发。 docker-hadoop-cluster适用于测试具有多个节点的Hadoop补丁。 从Hadoop源代码构建映像 hadoop服务的基本映像。 该映像包括JDK,hadoop软件包配置等。该映像可以包括您自己构建的hadoop软件包。 为了进行绑定,假定将tar.gz包放在hadoop-base目录下。 $ cd docker-hadoop-cluster $ cp /path/to/hadoop-3.0.0-alpha3-SNAPSHOT.tar.gz hadoop-base $ make 构建基于hadoop-base映像后,即可使用docker-compose启动hadoop集群。 $ docker-compose up -d 或者 $ make run 有关NameNode的信息,请参见 ;对于


【文件预览】:
docker-hadoop-cluster-master
----.gitignore(41B)
----ec2()
--------fabfile.py(391B)
--------ec2.py(2KB)
----Makefile(358B)
----bin()
--------resolv_host.py(704B)
--------launch.sh(136B)
--------destroy.sh(137B)
--------build.sh(121B)
--------build_cluster.sh(2KB)
----.travis.yml(1KB)
----LICENSE(70KB)
----docker-compose.yml(763B)
----.gitmodules(75B)
----README.md(4KB)
----hadoop-master()
--------Dockerfile(605B)
--------bootstrap.sh(1KB)
----hadoop-base()
--------Dockerfile(4KB)
--------hdfs-site.xml(247B)
--------core-site.xml(128B)
--------yarn-site.xml(3KB)
--------log4j.properties(15KB)
--------mapred-site.xml(137B)
--------ssh_config(93B)
----hadoop-slave()
--------Dockerfile(605B)
--------bootstrap.sh(1KB)
----hadoop()

网友评论