linux hadoop 集群安装步骤

时间:2023-12-28 15:26:44
http://blog.csdn.net/xjavasunjava/article/details/12013677

1,时间同步
hadoop集群的每台机器的时间不能相差太大。
安装集群前最好进行一下时间同步:
ntpdate stdtime.gov.hk 跟标准时间同步
date 查看本机时间 2,无密码登陆

查询某个进程的id

ps axu|grep hmaster

3, 安装心得:

各个机器的 service iptables off 关掉关掉

端口的问题

netstat -tunlp
         kill -s 9 pid  原因是 9001 端口被占用了   所以jobtrack 一直起不来。

(现象描述,master  jps  jobtracker 没启动,但是slave 上datanode tasktracker 都启动了,但进程一会就消失了)

多查看logs/ 里的日志

    /etc/hosts 一定要设置正确,当将master的hosts 中的 127.0.0.1 localhost 删除后,namenode 能够启动,但是jobtracker 依然无法启动。

确认:防火墙关闭

hosts 争取

stop-all 后 查看端口是否依然被占用。