javashuffle源码-MapReduce-Demo:Hadoop,MapReduce编程学习练手实例

时间:2021-06-04 12:56:28
【文件属性】:
文件名称:javashuffle源码-MapReduce-Demo:Hadoop,MapReduce编程学习练手实例
文件大小:359KB
文件格式:ZIP
更新时间:2021-06-04 12:56:28
系统开源 java shuffle源码 前言 之前没怎么在GitHub MD中写过目录索引,下文目录中有的锚点不能跳转(尤其是IE内核的浏览器),我也没办法。这里我将下文放到了我CSDN的博客上,可以跳转目录,看起来也方便美观一点—— 这里放一个我学习MapReduce的编程实例项目吧,本来是想把这些分开写成多篇文章的,能够详细叙述我学习过程中感想。但无奈,时间不够,只好在Github上创建了该项目,在代码中由较为详细的注释,我想也足够了吧。 该项目有些题目是参考了网上几篇博客,但代码实现是本人实现的。其次,所谓的MapReduce学习流程是参照老师上课所讲的PPT上的流程【某985大数据课程PPT】以及《MapReduce Design Patterns》顺序,我想老师以这样的流程授课肯定是有道理的。 该项目还在更新中,有些代码还没实现,慢慢来吧。 目录 MapReduce编程实例 1.自定义对象序列化 需求分析 需要统计手机用户流量日志,日志内容实例: 要把同一个用户的上行流量、下行流量进行累加,并计算出综合 。例如上面的13897230503有两条记录,就要对这两条记录进行累加,计算总和,

网友评论