Hadoop ha CDH5.15.1-hadoop集群启动后,集群容量不正确,莫慌,这是正常的表现!

时间:2021-09-11 21:33:41

     Hadoop ha CDH5.15.1-hadoop集群启动后,集群容量不正确,莫慌,这是正常的表现!

                                           作者:尹正杰

版权声明:原创作品,谢绝转载!否则将追究法律责任。

一.集群启动顺序

1>.查看Namenode节点的web UI界面,如下图所示

Hadoop ha CDH5.15.1-hadoop集群启动后,集群容量不正确,莫慌,这是正常的表现!

2>.耐心等待安全模式退出,集群方能正常使用(下图的安全模式的进度为85.39%)

Hadoop ha CDH5.15.1-hadoop集群启动后,集群容量不正确,莫慌,这是正常的表现!

3>.等待集群启动成功(大约30分钟左右才启动成功)

Hadoop ha CDH5.15.1-hadoop集群启动后,集群容量不正确,莫慌,这是正常的表现!

4>.上图只是我计算集群存储的数据,其实在存储集群的数据的话可能启动时间会更长,诺,下图就是用来存储集群启动的时间在35分钟左右

Hadoop ha CDH5.15.1-hadoop集群启动后,集群容量不正确,莫慌,这是正常的表现!

  是在有点蛋疼啊,重启一下服务得半个小时,看来我的找一些可以优化的方式,减少这个启动的时间。先把没有优化之前的集群放在这里。待我实验成功后,再把优化后的方式贴上来。

 

二.查看datanode节点工作是否正常

1>.查看datanodes标签,如下图所示

Hadoop ha CDH5.15.1-hadoop集群启动后,集群容量不正确,莫慌,这是正常的表现!

2>.下图现实了datanode和连接状态

Hadoop ha CDH5.15.1-hadoop集群启动后,集群容量不正确,莫慌,这是正常的表现!

 3>.当 Startup Progress 标签下的Safe mode进度为100%时,我们会发现,DataNode的节点也都启动成功了

Hadoop ha CDH5.15.1-hadoop集群启动后,集群容量不正确,莫慌,这是正常的表现!