问题描述:node82作为namenode节点,node81,node80,node79作为datanode,jps显示都是启动的,可以登陆网页却看不到
datanode节点信息。
网页显示:
各节点之间都可以ping
解决方案:
1. 首先在Master上ping slave,发现都可以ping通,这是可以找到的
2. 首先在slaves上ping Master,直接ping Master的hostname,发现根本没有办法ping 通,了解到 /etc/hosts里面的设置
有问题,发现里面Master的IP写错了,修改修改过来之后,重新运行,正常运行
如果不是这个问题,还有其他的解决方式
1. 查看NameNode的9000端口,(core-site.xml文件中的fs.default.name节点配置)端口是否打开,因为所有的DataNode都
要通过这个端口连接NameNode
2. 关闭防火墙,因为防火墙可能会阻止其他的电脑连接。使用以下命令关闭防火墙
service iptables stop
还有一种情况就是各个datanode节点中的hadoop/etc/hadoop/hdfs-site.xml中的dfs.datanode.data.dir设置的名称是一样的
造成了报告中误认为只有一个datanode!
所以删除各节点下的hadoop/hadoop_data/hdfs/datanode,新建和节点对应的datanode文件夹
再修改好对应的hdfs-site.xml文件