文件名称:worldwindjava源码-wukong-hadoop:在Hadoop框架内执行Wukong代码
文件大小:44KB
文件格式:ZIP
更新时间:2024-06-25 16:31:21
系统开源
世界风java源码悟空-Hadoop Wukong 的 Hadoop 插件可让您通过命令行运行。 在使用 Wukong-Hadoop 开发、测试和编写 Hadoop 作业之前,您可能需要阅读有关 . 您可能还想查看其他一些丰富 Wukong 和 Hadoop 体验的项目: : 在 Storm 框架内运行 Wukong 处理器。 模型在运行之前在本地流动。 :加载本地 Wukong 作业的输出数据并流入各种不同的数据存储。 :将在 Hadoop 中运行的 Wukong 处理器连接到 Elasticsearch 作为数据的源或接收器。 :将 Wukong 和其他 wu-tools 编排在一起,以支持在 Infochimps 平台上运行的应用程序。 安装和设置 Wukong-Hadoop 可以作为 RubyGem 安装: $ sudo gem install wukong-hadoop 如果你真的想在 Hadoop 集群上运行你的 map/reduce 作业,你当然需要一个方便的。 是快速轻松地构建和管理 Hadoop 集群和其他分布式基础架构的绝佳工具。 要通过 Wukong-Hadoop
【文件预览】:
wukong-hadoop-master
----lib()
--------wukong-hadoop.rb(8KB)
--------wukong-hadoop()
----Gemfile(149B)
----spec()
--------spec_helper.rb(593B)
--------wukong-hadoop()
--------wukong-hadoop_spec.rb(83B)
----Rakefile(187B)
----examples()
--------map_only.rb(665B)
--------sonnet_18.txt(619B)
--------counter.rb(238B)
--------word_count.rb(909B)
--------processors.rb(110B)
--------tokenizer.rb(668B)
----wukong-hadoop.gemspec(1KB)
----LICENSE.md(11KB)
----README.md(13KB)
----features()
--------wu_hadoop.feature(4KB)
--------step_definitions()
--------support()
----.rspec(26B)
----.yardopts(64B)
----.gitignore(399B)
----bin()
--------wu-hadoop(78B)
--------hdp-stream-flat(879B)
--------hdp-du(3KB)
--------hdp-kill(48B)
--------hdp-sync(554B)
--------hdp-put(47B)
--------hdp-cat(47B)
--------hdp-parts_to_keys.rb(2KB)
--------hdp-bin(1KB)
--------hdp-stream(1KB)
--------hdp-mkdir(47B)
--------hdp-wc(2KB)
--------hdp-mkdirp(318B)
--------hdp-mv(46B)
--------hdp-ls(206B)
--------hdp-cp(46B)
--------hdp-sort(10B)
--------hdp-stream2(1KB)
--------hdp-catd(140B)
--------hdp-ps(47B)
--------hdp-get(60B)
--------hdp-kill-task(53B)
--------hdp-bzip(932B)
--------hdp-rm(839B)