文件名称:vagrant-jilla-hadoop:流浪者设置来启动vm hadoop集群
文件大小:936KB
文件格式:ZIP
更新时间:2024-06-05 15:31:13
Shell
带Spark 1.4.1和Hive,Pig客户端的vagrant-hadoop-2.6.0 介绍 Vagrant项目通过数据节点中的Hadoop v2.6.0,Spark 1.4.1以及apache hive和pig客户端启动了由5个虚拟机组成的集群 node1:HDFS名称节点+ Spark Master node2:HDFS数据节点+ YARN ResourceManager + JobHistoryServer + ProxyServer + Spark从属 node3:HDFS数据节点+ YARN NodeManager + Spark从站 node4:HDFS数据节点+ YARN NodeManager + Spark从属 node5:HDFS数据节点+ YARN NodeManager + Spark从站 入门 。 运行vagrant box add centos65
【文件预览】:
vagrant-jilla-hadoop-master
----Vagrantfile(2KB)
----Vagrantfile_2nn(2KB)
----scripts()
--------setup-java.sh(879B)
--------setup-spark.sh(1KB)
--------setup-centos-ssh.sh(2KB)
--------setup-centos-hosts.sh(1KB)
--------setup-hadoop-slaves.sh(505B)
--------setup-pig.sh(868B)
--------setup-mysql.sh(313B)
--------common.sh(2KB)
--------setup-yarn.sh(390B)
--------setup-centos.sh(212B)
--------setup-spark-slaves.sh(501B)
--------setup-namenode.sh(476B)
--------setup-hadoop.sh(1KB)
--------setup-hive.sh(918B)
----Vagrantfile_hadoop_only(2KB)
----README.md(7KB)
----resources()
--------ssh()
--------hive()
--------pig()
--------hadoop()
--------spark()
----.gitignore(70B)