Hadoop集群启动后在网页无法看到DataNode信息

时间:2024-05-21 08:42:36

问题描述:node82作为namenode节点,node81,node80,node79作为datanode,jps显示都是启动的,可以登陆网页却看不到

                 datanode节点信息。

                Hadoop集群启动后在网页无法看到DataNode信息

网页显示:

               Hadoop集群启动后在网页无法看到DataNode信息          

               Hadoop集群启动后在网页无法看到DataNode信息

各节点之间都可以ping


解决方案:
           

    1. 首先在Master上ping slave,发现都可以ping通,这是可以找到的

    2. 首先在slaves上ping Master,直接ping Master的hostname,发现根本没有办法ping 通,了解到 /etc/hosts里面的设置 

        有问题,发现里面Master的IP写错了,修改修改过来之后,重新运行,正常运行

如果不是这个问题,还有其他的解决方式

1. 查看NameNode的9000端口,(core-site.xml文件中的fs.default.name节点配置)端口是否打开,因为所有的DataNode都

    要通过这个端口连接NameNode

2. 关闭防火墙,因为防火墙可能会阻止其他的电脑连接。使用以下命令关闭防火墙

      service iptables stop


还有一种情况就是各个datanode节点中的hadoop/etc/hadoop/hdfs-site.xml中的dfs.datanode.data.dir设置的名称是一样的

造成了报告中误认为只有一个datanode!

所以删除各节点下的hadoop/hadoop_data/hdfs/datanode,新建和节点对应的datanode文件夹

Hadoop集群启动后在网页无法看到DataNode信息

再修改好对应的hdfs-site.xml文件

Hadoop集群启动后在网页无法看到DataNode信息