hadoop伪分布式安装

时间:2022-08-08 04:49:03
下载、安装、配置、启动、运行 环境centos6 (1)安装JDK,原来的openjdk不行,因为没jps命令,环境变量设置:hadoop伪分布式安装(2)下载并且解压后 hadoop-2.7.3hadoop伪分布式安装hadoop伪分布式安装然后wget http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.7.3/hadoop-2.7.3.tar.gz(3)把解压的文件放到相应的目录下,我这里是放在xie用户目录下的,配置环境变量:hadoop伪分布式安装(4)修改配置文件hadoop伪分布式安装hadoop伪分布式安装配置hadoop-env.sh文件在配置文件中找到JAVA_HOME关键字所在行,把前面#号去掉,改成实际的JAVA_HOME地址配置core-site.xml文件hadoop伪分布式安装记得要去bigdata目录中新建一个tmp目录配置hdfs-site.xml文件hadoop伪分布式安装配置maperd-site.xmlhadoop伪分布式安装一开始我没配置这个文件,可是也是可以运行的(5)启动hadoop namenode -format #先格式化namenode
start-all.sh 启动jpshadoop伪分布式安装查看hadoop集群状态hadoop伪分布式安装(6)运行wordcount例子hadoop伪分布式安装hadoop fs -mkdir /inputhadoop fs ls /hadoop伪分布式安装把要统计的单词上传到hdfs上面,这里是自己随便建的一些测试的文本。hadoop伪分布式安装hadoop伪分布式安装执行:hadoop jar /home/xie/bigdata/hadoop-2.7.3/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.3.jar wordcount /input /outputhadoop伪分布式安装结果:hadoop伪分布式安装