文件名称：冷备机制-《hadoop可靠性研究报告》
文件大小：357KB
文件格式：PPT
更新时间：2024-05-12 13:32:01
hadoop 可靠性 Hdfs MapReduce 百度
冷备机制1 此版本中多了一个BackupNode的角色，这个BackupNode相当于一个namenode的“冷备机”。Namenode在hadoop hdfs中是一个单点，如果这个单点发生故障，需要对namenode进行恢复，而在一个规模很大，文件目录以及文件块很多的HDFS中，重 启一次namenode花费的时间是相当长的，时间主要耗费在fsimage加载阶段以及所有的datanodes做blockReport的阶段。 One of Yahoo's Hadoop clusters sorted 1 terabyte of data in 209 seconds, which beat the previous record of 297 seconds in the annual general purpose (Daytona) terabyte sort benchmark. This is the first time that either a Java or an open source program has won.