【文件属性】：
文件名称：Spark集群及开发环境搭建
文件大小：727KB
文件格式：DOCX
更新时间：2021-04-29 02:25:33
Spark Hadoop
初学者手册
一、 软件及下载 2
二、 集群环境信息 2
三、 机器安装 3
1. 安装虚拟机VirtualBox 3
2. 安装CentOs7 3
四、 基础环境搭建（hadoop用户下） 7
1. 机器名HostName 7
2. 关闭防火墙 7
3. 系统更新及常用工具安装 8
4. IP配置 8
5. JDK安装 9
五、 Hadoop安装及配置 10
1. 安装 10
2. 配置 10
六、 机器集群搭建 14
1. 复制机器 14
2. 设置静态IP 15
3. 设置机器名hostname 15
4. ssh免密登录 15
5. hadoop集群测试 17
七、 Spark & Scala 集群安装 18
1. scala安装 18
2. spark安装 19
3. 测试spark集群 20
八、 Scala开发环境搭建 21
1、系统安装 21
2、安装jdk8 21
3、安装scala2.11 21
4、安装scala for eclipse 21
5、创建scala工程 21