CDH 测试 HDFS 是否具有过多副本不足块。
关注微信公共号：小程在线关注CSDN博客：程志伟的博客测试 HDFS 是否具有过多副本不足块。不良 : 群集中有 1,814 个 副本不足的块 块。群集中共有 1,816 个块。百分比 副本不足的块: 99.89%。 临界阈值：40.00%。这是 HDFS 服务级运行状况测试，用于检查副本不足的块数是否未超过群集块总数的某一百分比。该运行状况测试失败可能表示 DataNode 丢失。使用 HDFS
·
关注微信公共号：小程在线
关注CSDN博客：程志伟的博客
测试 HDFS 是否具有过多副本不足块。
不良 : 群集中有 1,814 个 副本不足的块 块。群集中共有 1,816 个块。百分比 副本不足的块: 99.89%。 临界阈值：40.00%。
这是 HDFS 服务级运行状况测试，用于检查副本不足的块数是否未超过群集块总数的某一百分比。
该运行状况测试失败可能表示 DataNode 丢失。使用 HDFS fsck 命令可确定哪些文件含有副本不足的块。
可使用 副本不足的块监控阈值 HDFS 服务范围内的监控设置配置该测试。
解决方法：
步骤一：在HDFS的配置下搜索 dfs.replication 将复制因子调整为2。
步骤二：
su - hdfs
hadoop fs -setrep -R 2 /
hdfs的错误解决了。
原因：
自己搭建DataNode个数只有2个，但是默认的参数为3个。
魔乐社区（Modelers.cn) 是一个中立、公益的人工智能社区，提供人工智能工具、模型、数据的托管、展示与应用协同服务，为人工智能开发及爱好者搭建开放的学习交流平台。社区通过理事会方式运作，由全产业链共同建设、共同运营、共同享有，推动国产AI生态繁荣发展。
更多推荐
0
0- 0
已为社区贡献9条内容
所有评论(0)