数据损坏(corruption)处理-Hadoop介绍

时间:2024-05-16 04:06:44
【文件属性】:

文件名称:数据损坏(corruption)处理-Hadoop介绍

文件大小:12.67MB

文件格式:PPT

更新时间:2024-05-16 04:06:44

hadoop hadoop入门 大数据学习 大数据 大数据

数据损坏(corruption)处理 当DataNode读取block的时候,它会计算checksum 如果计算后的checksum,与block创建时值不一样,说明该block已经损坏。 Client读取其它DN上的block。 NameNode标记该块已经损坏,然后复制block达到预期设置的文件备份数 DataNode 在其文件创建后三周验证其checksum。


网友评论