文件名称:vagrant-hadoop-2.4.1-spark-1.0.1:Vagrant项目使用Hadoop v2.4.1和Spark v1.0.1启动集群虚拟机
文件大小:23KB
文件格式:ZIP
更新时间:2024-06-03 14:28:07
Shell
流浪汉-hadoop-2.4.1-spark-1.0.1 介绍 Vagrant项目使用Hadoop v2.4.1和Spark v1.0.1启动了由4个虚拟机组成的集群。 node1:HDFS名称节点+ Spark Master node2:YARN ResourceManager + JobHistoryServer + ProxyServer node3:HDFS数据节点+ YARN NodeManager + Spark从站 node4:HDFS数据节点+ YARN NodeManager + Spark从站 入门 。 运行vagrant box add centos65 https://github.com/2creatives/vagrant-centos/releases/download/v6.5.1/centos65-x86_64-20131205.box Gi
【文件预览】:
vagrant-hadoop-2.4.1-spark-1.0.1-master
----Vagrantfile(2KB)
----scripts()
--------setup-java.sh(836B)
--------setup-spark.sh(927B)
--------setup-centos-ssh.sh(2KB)
--------setup-centos-hosts.sh(1KB)
--------setup-hadoop-slaves.sh(505B)
--------common.sh(1006B)
--------setup-centos.sh(212B)
--------setup-spark-slaves.sh(501B)
--------setup-hadoop.sh(1KB)
----README.md(6KB)
----resources()
--------ssh()
--------hadoop()
--------spark()
----.gitignore(113B)