http://blog.csdn.net/pipisorry/article/details/51243805
Hadoop简介
下次写上。。。
配置hadoop环境可能出现的问题
每次format之前最好删除掉保存的日志等文件,免得namenode和datanode的id不一致而出现问题。
搭建完成后运行时候遇到过卡到map阶段不会动情况,然后配置了一下yarn内存可以用了。
每次format之前最好删除掉保存的日志等文件,免得namenode和datanode的id不一致而出现问题。
Eclipse中使用hadoop编程
下载安装eclipse
root用户打开eclipse:
root@ubuntu-BDMS:~# /opt/eclipse/eclipse &
下载配置hadoop的eclipse插件
下载hadoop-eclipse-plugin-2.6.0.jar到eclipse安装目录/plugins目录下[hadoop2x-eclipse-plugin]
guest@ubuntu-BDMS:~$ sudo wget -P /opt/eclipse/plugins/ https://github.com/winghc/hadoop2x-eclipse-plugin/blob/master/release/hadoop-eclipse-plugin-2.6.0.jar
from: http://blog.csdn.net/pipisorry/article/details/51243805
ref: Hadoop文档