hadoop-docker:hadoop docker

时间:2024-03-03 22:52:59
【文件属性】:

文件名称:hadoop-docker:hadoop docker

文件大小:45KB

文件格式:ZIP

更新时间:2024-03-03 22:52:59

Shell

hadoop-docker 前言 本项目使用docker-compose在单机上快速构建hadoop进行,方便基于hadoop的开发与测试。 快速启动 1.准备 本地需要提前安装 && 2.创建 hadoop容器将分为主机和从属两个类型,其中master容器中运行namenode和ResourceManager,slave容器中运行datanode和NodeManager。 容器将在../hdfs_data位置存储namenode和datanode hadoop-master容器配置参数 namenode文件夹地址: /root/hdfs/namenode 环境 IMAGE_ROLE 容器类型为从属容器,当IMAGE_ROLE标记为master表示此容器为master容器,根据此标记容器启动时自动执行格式namenod && start-dfs && start-yarn等命令 奴


【文件预览】:
hadoop-docker-2.10.1
----Dockerfile(2KB)
----README.md(4KB)
----zk_conf()
--------zoo.cfg(1KB)
----JDK()
--------8u271()
--------11.0.9()
----conf()
--------mapred-site.xml.template(1KB)
--------hadoop-policy.xml(10KB)
--------httpfs-site.xml(620B)
--------mapred-queues.xml.template(4KB)
--------ssl-client.xml.example(2KB)
--------capacity-scheduler.xml(9KB)
--------log4j.properties(14KB)
--------ssl-server.xml.example(3KB)
--------kms-acls.xml(3KB)
--------container-executor.cfg(1KB)
--------ssh_config(126B)
--------yarn-env.sh(5KB)
--------kms-site.xml(6KB)
--------core-site.xml(888B)
--------hdfs-site.xml(1022B)
--------mapred-env.sh(1KB)
--------kms-env.sh(3KB)
--------hadoop-env.cmd(4KB)
--------hadoop-env.sh(5KB)
--------hadoop-metrics2.properties(3KB)
--------httpfs-signature.secret(21B)
--------kms-log4j.properties(2KB)
--------hadoop-metrics.properties(2KB)
--------httpfs-log4j.properties(2KB)
--------mapred-env.cmd(1KB)
--------yarn-env.cmd(2KB)
--------httpfs-env.sh(2KB)
--------configuration.xsl(1KB)
--------yarn-site.xml(1KB)
----docker-compose.yml(2KB)
----docs()
--------idea_connect_hadoop_cluster.md(6KB)
----LICENSE(1KB)
----scripts()
--------entrypoint.sh(1KB)

网友评论