hadoop-mapreduce:hadoop MapReduce

时间:2024-05-22 05:53:06
【文件属性】:

文件名称:hadoop-mapreduce:hadoop MapReduce

文件大小:233KB

文件格式:ZIP

更新时间:2024-05-22 05:53:06

Java

hadoop-mapreduce Hadoop MapReduce示例。 使用HDFS中存储的access.log文件,实现MapReduce以查找每个IP访问该网站的次数。 先决条件: 已安装Hadoop。 将access.log文件复制到hdfs中。 假设它在hdfs:/// logs下 用法: 将项目导入Eclipse。 将项目导出为jar文件(accessMR.jar)。 执行命令以在hadoop中执行mapreduce。 hadoop jar /Users/hello/Desktop/accessMR.jar accessMR.AccessMR /logs/access.log /user/output 检查输出。 hadoop fs -cat /user/output/part-00000 运行hadoop命令的快捷方式: 编辑〜/ .profile并设置h


【文件预览】:
hadoop-mapreduce-master
----README.md(1KB)
----access.log(3.34MB)
----accessMR()
--------.project(367B)
--------bin()
--------.settings()
--------src()
--------.classpath(380B)

网友评论