1.背景

在运行flink的时候报错，参考：

然后在Yarn界面上看到如下

2.原因分析

之所以会有 local-dirs are bad，log-dirs are bad 报错，是因为在我们集群的 yarn-site.xml 里参数 yarn.nodemanager.disk-health-checker.max-disk-utilization-per-disk-percentage 的默认值是 90%，到达到这个值会触发上述报错。

3.解决方法1

删除部分没用的数据让磁盘已用容量下降到90%一下

清理磁盘。 df -hl 查看所有磁盘使用率–> du -h --max-depth=1 查看当前目录下最大的文件或路径。结果发现是我的hadoop data 目录占用

[Yarn] Yarn local-dirs are bad 导致节点处于不健康状态相关推荐

[Spark] Yarn local-dirs are bad 导致节点处于不健康状态
1.背景在运行flink的时候报错,参考: 然后在Yarn界面上看到如下 2.原因分析之所以会有 local-dirs are bad,log-dirs are bad 报错,是因为在我们集群的 ...
【Yarn】yarn local dirs的管理实现
1.概述在yarn中对 yarn.nodemanager.local-dirs的状态更新操作,定义在 LocalDirsHandlerService(org.apache.hadoop.yarn.s ...
Hadoop多次format格式化会导致节点的clusterID不一致
1. 使用环境 vmware配置的3个Centos7虚拟机,一个master,2个slave 2. 问题描述 hadoop 多次格式化format namenode 导致节点不能启动出现这个问题的原 ...
模拟私网问题导致节点宕机无法启动
模拟私网问题导致节点宕机无法启动目的分析过程 GI alert日志 os日志 ocssd.log 日志参考文档目的本文章通过模拟私网问题,导致集群节点宕机,来进行日志分析. # ifconf ...
oracle重启root,案例:Oracle报错ORA-15025 ORA-27041 root用户操作rac导致节点宕机
天萃荷净运维DBA反映Oracle RAC环境中节点宕机,alert发现报错ORA-15025 ORA-27041,分析原因为使用root用户操作rac导致节点宕机接到同事请求,说客户的linux ...
Oracle显示表裂开,【案例】Oracle RAC脑裂导致节点重启原因分析
天萃荷净 Oracle研究中心案例分析:运维DBA反映Oracle RAC重启,分析原因为脑裂导致,结合日志分析产生原因. 本站文章除注明转载外,均为本站原创: 转载自love wife & ...
下载丨云和恩墨技术通讯：OCR无法正常读取导致节点宕机
墨墨导读:为了及时共享行业案例,通知共性问题,达成共享和提前预防,我们整理和编辑了<云和恩墨技术通讯>,通过对过去一段时间的知识回顾,故障归纳,以期提供有价值的信息供大家参考.同时,我们也 ...
oracle_最常见的 5 个导致节点重新启动、驱逐或 CRS 意外重启的问题
oracle_最常见的 5 个导致节点重新启动.驱逐或 CRS 意外重启的问题 Purpose Scope Details 问题 1:节点重新启动,但是日志文件未显示任何错误或原因. ...
最常见的5个导致节点重新启动、驱逐或 CRS 意外重启的问题
Applies to: Oracle Database - Enterprise Edition - Version 10.1.0.2 to 11.2.0.3 [Release 10.1 to 11. ...

[Yarn] Yarn local-dirs are bad 导致节点处于不健康状态

1.背景

2.原因分析

3.解决方法1

[Yarn] Yarn local-dirs are bad 导致节点处于不健康状态相关推荐

最新文章

热门文章