文件名称:在Hadoop的MapReduce任务中使用C程序的三种方法
文件大小:418KB
文件格式:DOCX
更新时间:2016-09-10 02:38:10
Hadoop MapReduce C语言 数据挖掘 并行计算
Hadoop是一个主要由Java语言开发的项目,基于Hadoop的MapReduce程序也主要是使用Java语言来编写。但是有一些时候,我们需要在MapReduce程序中使用C语言、C++以及其他的语言,比如项目的开发人员更熟悉Java之外的语言,或者项目已经有部分功能用其他语言实现等。针对这些情况,我们需要研究如何在基于Java的MapReduce程序中引入其他语言。经过调研,在MapReduce任务中使用C++程序的方法主要有三种:Hadoop Streaming、Hadoop Pipes以及Hadoop JNI。