Hadoop集群添加新节点步骤

时间:2024-07-15 12:36:32

1.在新节点中进行操作系统配置,包括主机名。网络。防火墙和无密码登录等。

2.在所有节点/etc/host文件中添加新节点

3.把namenode的有关配置文件复制到该节点

4.修改master节点slaves文件,增加改节点

5.单独启动该节点上的datanode和nodemanager

$hadoop-daemon.sh start datanode(在新增加节点启动 datanode)

$yarn-daemon.sh start nodemanager

运行start-balancer.sh 进行数据负载均衡

(默认阀值:单个节点的使用率和整个集群的使用率差值是10%以下,超过百分之十集群就会进行负载均衡)