Hadoop中wordcount程序

时间:2023-03-09 07:47:52
Hadoop中wordcount程序

一、测试过程中

输入命令:

首先需要在hadoop集群中添加文件

可以首先进行查看hadoop集群中文件目录 hadoop fs -ls /

hadoop fs -ls -R /

hadoop fs -mkdir /input(在这个中浪费了很多时间,没有注意到时应该建立目录,需要路径进行相关的选择)

hadoop fs -put   /*txt文本路径   /input

hadoop jar share/hadoop/mapreduce/sources/hadoop-mapreduce-examples-2.5.2-sources.jar org.apache.hadoop.examples.WordCount /input /output

hadoop fs -ls output (对文件进行查看)

Hadoop中wordcount程序

然后查看 part-r-00000文件

hadoop fs -cat /output/part-r-00000

输出结果:

Hadoop中wordcount程序

文件对比:

Hadoop中wordcount程序

成功!!!!