MapReduce-Demo:一个演示MapReduce(Hadoop)程序,用于处理少量数据

时间:2024-05-29 04:23:17
【文件属性】:

文件名称:MapReduce-Demo:一个演示MapReduce(Hadoop)程序,用于处理少量数据

文件大小:15KB

文件格式:ZIP

更新时间:2024-05-29 04:23:17

Java

MapReduce-Demo 一个演示MapReduce程序,用于处理少量数据 如何: * 1。 通过更新Maven依赖项来编译项目 * 2。 通过指向主要方法类(Students.java)从eclipse导出为.jar * 3。 将输入数据加载到HDFS COMMAND TO LOAD THE INPUT DATA TO HDFS: hadoop fs -put "/my_folder_location/students.txt" hdfs:/students.txt * 4。使用罐子执行作业并提供粗化(输入和输出文件路径) COMMAND TO EXECUTE THE MAPREDUCE JOB: hadoop jar students-high-mark.jar hdfs:/new-students.txt hdfs:/student-out9.txt * 5。 验证


【文件预览】:
MapReduce-Demo-master
----pom.xml(930B)
----target()
--------MapReduce-Demo.jar(5KB)
--------classes()
--------maven-archiver()
----data()
--------students.txt(388B)
----.settings()
--------org.eclipse.m2e.core.prefs(86B)
--------org.jboss.ide.eclipse.as.core.prefs(93B)
--------org.eclipse.jdt.core.prefs(238B)
----src()
--------main()
----.project(543B)
----.classpath(1KB)
----README.md(2KB)

网友评论