hadoop管理命令——fsck
原创
©著作权归作者所有:来自51CTO博客作者ciznx的原创作品,请联系作者获取转载授权,否则将追究法律责任
fsck工具来检验HDFS中的文件是否正常可用。这个工具可以检测文件块是否在DataNode中丢失,是否低于或高于文件副本。
调用方式:
例如:hadoop fsck /user/admin/In/hello.txt -files -blocks -racks (如果不加选项,则执行所有的指令)
命令详细:
-files: 显示文件的文件名称、大小、块数量及是否可用;
-blocks: 显示每个块在文件中的信息,一个块用一行显示;
-racks: 展示了每个块所处的机架位置及DataNode的位置;
可能出现的输出:
Over-replicated blocks:一些文件块副本数超出了它所属文件的限定
Under-replicated blocks : 文件块数未达到所属文件要求的副本数量
Misreplicated blocks :指出不满足块副本存储位置策略的块
Corrupt blocks : 所有的块副本全部出现问题
Missing replicas : 集群不存在副本的文件块