搭建hadoop伪分布式.docx

时间:2022-06-12 03:40:50
【文件属性】:

文件名称:搭建hadoop伪分布式.docx

文件大小:20KB

文件格式:DOCX

更新时间:2022-06-12 03:40:50

hadoop 伪分布式 大数据

伪分布式运行模式 这种模式也是在一台单机上运行,但用不同的Java进程模仿分布式运行中的各类结点(NameNode,DataNode,JobTracker,TaskTracker,SecondaryNameNode),请注意分布式运行中的这几个结点的区别:从分布式存储的角度来说,集群中的结点由一个NameNode和若干个DataNode组成,另有一个SecondaryNameNode作为NameNode的备份。从分布式应用的角度来说,集群中的结点由一个JobTracker和若干个TaskTracker组成,JobTracker负责任务的调度,TaskTracker负责并行执行任务。TaskTracker必须运行在DataNode上,这样便于数据的本地计算。JobTracker和NameNode则无须在同一台机器上。


网友评论