文件名称:YarnExamples:Hadoop 2 (YARN API) 中带有 Map Reduce 示例的存储库
文件大小:126KB
文件格式:ZIP
更新时间:2024-07-25 16:05:22
Java
纱线示例 Hadoop 2 (YARN API) 中带有 Map Reduce 示例的存储库 目前的例子: 如何执行示例? 我假设你克隆了这个存储库,你用 netbeans 编译并构建了一个 jar 文件,并且你已经安装了 Hadoop 2.X。 如果之前没问题,则应使用下一个命令执行 DgIndexer: hadoop jar /path_to_jar_file/YarnExamples.jar dgIndexer.DgIndexer /user/hduser/data/TrecFile.txt /user/hduser/OutputFolder 如果示例完成成功,您可以查看结果: hdfs dfs -cat /user/hduser/OutputFolder/part-r-00000 尖端 设置任意减速器数量:mapreduce.job.reduces hadoop j
【文件预览】:
YarnExamples-master
----.gitignore(34B)
----src()
--------wordCount()
--------dgIndexer()
--------dgCombIndexer()
--------indexingCommons()
--------lib()
--------nutchIndexer()
----LICENSE(34KB)
----nbproject()
--------genfiles.properties(467B)
--------build-impl.xml(79KB)
--------project.properties(4KB)
--------project.xml(571B)
----README.md(1KB)
----build.xml(3KB)