文件名称:数据损坏(corruption)处理-Hadoop介绍
文件大小:12.67MB
文件格式:PPT
更新时间:2024-05-16 04:06:44
hadoop hadoop入门 大数据学习 大数据 大数据
数据损坏(corruption)处理 当DataNode读取block的时候,它会计算checksum 如果计算后的checksum,与block创建时值不一样,说明该block已经损坏。 Client读取其它DN上的block。 NameNode标记该块已经损坏,然后复制block达到预期设置的文件备份数 DataNode 在其文件创建后三周验证其checksum。