MapReduceV1:JobTracker处理Heartbeat流程分析

时间:2024-03-12 11:27:46
【文件属性】:

文件名称:MapReduceV1:JobTracker处理Heartbeat流程分析

文件大小:154KB

文件格式:PDF

更新时间:2024-03-12 11:27:46

MapReduceV1:JobTracker处理Heartbeat流程分析

我们基于Hadoop1.2.1源码分析MapReduceV1的处理流程。这篇文章的内容,更多地主要是描述处理/交互流程性的东西,大部分流程图都是经过我梳理后画出来的(开始我打算使用序列图来描述流程,但是发现很多流程在单个对象内部都已经非常复杂,想要通过序列图表达有点担心描述不清,所以选择最基本的程序流程图),可能看起来比较枯燥,重点还是关注主要的处理流程要点,特别的地方我会刻意标示出来,便于理解。JobTracker与TaskTracker之间通过org.apache.hadoop.mapred.InterTrackerProtocol协议来进行通信,TaskTracker通过该接口进行远程调


网友评论