遇到的问题

我们的hadoop集群在运作过程中部分节点报错local-dirs are bad

遇到问题---hadoop----local-dirs are bad_local dirs are bad

原因

hadoop集群硬盘目录默认的使用阈值是90%
空间不足,目录使用率超过阈值了90%了

遇到问题---hadoop----local-dirs are bad_hadoop_02

解决方式

调整yarn的参数
yarn.nodemanager.disk-health-checker.max-disk-utilization-per-disk-percentage
把比例调高到98%

但是这种方式治标不治本,最好还是清理hadoop集群的空间,腾出硬盘空间。

https://discuss.pivotal.io/hc/en-us/articles/230700528-YARN-Alerts-NodeManager-is-unhealthy-local-dirs-are-bad