Hadoop多次format格式化会导致节点的clusterID不一致

时间:2024-03-14 10:52:32

1. 使用环境

vmware配置的3个Centos7虚拟机,一个master,2个slave

2. 问题描述

hadoop 多次格式化format namenode 导致节点不能启动
Hadoop多次format格式化会导致节点的clusterID不一致
出现这个问题的原因是多次格式化会导致节点的clusterID不一致

3. 解决方法

(1)先停止所有启动的服务

/usr/local/hadoop/sbin/stop-all.sh

(2)删除core-site.xml 和hdfs-site.xml文件中配置的文件夹(注意:这一步在三台机器上都要做)

rm -r /usr/local/hadoop/tmp

其他两条命令类似,进入hdfs文件夹下,删除name和data文件夹,命令和上面的一样

注意:可以通过core-site.xml和hdfs-site.xml中的配置文件查看文件的相应位置

core-site.xml
Hadoop多次format格式化会导致节点的clusterID不一致

hdfs-site.xml
Hadoop多次format格式化会导致节点的clusterID不一致

(3)重新格式化

hadoop namenode -format

(4)启动服务

使用 ./start-all.sh or ./start-dfs.sh 两个命令启动服务,再使用jps查看是不是namnode 和datanode都已经启动

Hadoop多次format格式化会导致节点的clusterID不一致

datanode1:
Hadoop多次format格式化会导致节点的clusterID不一致

datanode2:
Hadoop多次format格式化会导致节点的clusterID不一致

master:
Hadoop多次format格式化会导致节点的clusterID不一致