0530-6.1-如何只是迁移NameNode或JournalNode

时间:2022-10-04 11:57:47

温馨提示:如果使用电脑查看图片不清晰,可以使用手机打开文章单击文中的图片放大查看高清原图。


Fayson的github:

​https://github.com/fayson/cdhproject​


提示:代码块部分可以左右滑动查看噢



1

文档编写目的


Fayson在上一篇文章《0528-6.1-如何迁移NameNode相关角色》中介绍过通过Cloudera Manager迁移管理节点NameNode,JournalNode和Failover Controller三个角色到其它节点。本文主要介绍如何只是迁移NameNode+Failover Controller或JournalNode角色。


  • 测试环境

1.CDH6.1

2.Redhat7.4

3.HDFS已经启用HA


2

环境准备


1.启用HDFS HA成功后再次查看HDFS服务的“实例”页面,可以看到一共4个节点在一个HDFS HA的集群中的不同角色划分。


0530-6.1-如何只是迁移NameNode或JournalNode


3

只迁移NameNode和Failover Controller


1.在HDFS服务的“实例”页面,点击“迁移角色”


0530-6.1-如何只是迁移NameNode或JournalNode


2.源主机我们选择ip-172-31-12-142.ap-southeast-1.compute.internal,然后取消JournalNode的勾选,目标主机我们选择

ip-172-31-9-113.ap-southeast-1.compute.internal


0530-6.1-如何只是迁移NameNode或JournalNode


注意Failover Controller必须和NameNode节点在同一个机器,不能进行勾选。最下方提示该操作需要重启集群,必须勾选才能继续往下走,这里我们勾选,并点击“继续”。


3.开始进行NameNode和Failover Controller角色的迁移。


0530-6.1-如何只是迁移NameNode或JournalNode


所有命令执行成功:


0530-6.1-如何只是迁移NameNode或JournalNode


点击完成


4.查看NameNode,JournalNode以及Failover Controller已经迁移到了我们所选择的节点ip-172-31-9-113上。


0530-6.1-如何只是迁移NameNode或JournalNode


集群一切正常:


0530-6.1-如何只是迁移NameNode或JournalNode


4

只迁移JournalNode


1.在HDFS服务的“实例”页面,点击“迁移角色”


0530-6.1-如何只是迁移NameNode或JournalNode


2.源主机我们选择ip-172-31-6-83.ap-southeast-1.compute.internal,然后取消NameNode和Failover Controller的勾选,目标主机我们选择

ip-172-31-9-113.ap-southeast-1.compute.internal


0530-6.1-如何只是迁移NameNode或JournalNode


注意Failover Controller必须和NameNode节点在同一个机器,取消勾选NameNode默认也取消勾选了Failover Controller。最下方提示该操作需要重启集群,必须勾选才能继续往下走,这里我们勾选,并点击“继续”。


3.开始进行JournalNode角色的迁移。


0530-6.1-如何只是迁移NameNode或JournalNode


所有命令执行成功:


0530-6.1-如何只是迁移NameNode或JournalNode


点击完成


5.查看JournalNode已经迁移到了我们所选择的节点ip-172-31-9-113上。


0530-6.1-如何只是迁移NameNode或JournalNode


5

总结


1.如果你想将NameNode,JournalNode和Failover Controller角色所在的节点从CDH集群中剥离,可以使用Cloudera Manager界面向导式执行。


2.Cloudera Manager对于HDFS服务的角色迁移功能只针对NameNode,JournalNode和Failover Controller角色,不包括其他角色比如DataNode。


3.Cloudera Manager对于HDFS服务的角色迁移必须在HDFS已经启用HA的情况下执行,即如果你只有一个NameNode,Cloudera Manager没有提供你只是迁移这个NameNode到新的节点。


4.该功能在执行过程中会需要重启整个HDFS服务,请提前做好停机规划。


5.在迁移选择节点时,你可以选择同时迁移NameNode和JournalNode到另外一台主机,Failover Controller默认也会被迁移到新的主机,因为Failover Controller角色必须和NameNode角色在同一节点。你也可以选择只迁移NameNode或JournalNode角色。本文就是描述只单独迁移NameNode+Failover Controller或JournalNode。


提示:代码块部分可以左右滑动查看噢


为天地立心,为生民立命,为往圣继绝学,为万世开太平。

温馨提示:如果使用电脑查看图片不清晰,可以使用手机打开文章单击文中的图片放大查看高清原图。



推荐关注Hadoop实操,第一时间,分享更多Hadoop干货,欢迎转发和分享。

0530-6.1-如何只是迁移NameNode或JournalNode

原创文章,欢迎转载,转载请注明:转载自微信公众号Hadoop实操