前几天碰到jbd2进程占用大量的磁盘io,用iotop查看到的情况大致如下:

系统版本:CentOS6.5-64bit

经查为ext4文件系统的一个bug:

先给出解决方案,处理此问题的优先级为:

1、yum update kernel 用yum升级系统内核,重启之后查看是否有效;

2、缓解方法:修改commit值,降低文件系统提交次数或者禁用barrier特性;

建议文件系统参数为:defaults,noatime,nodiratime,barrier=0,data=writeback,commit=60

(可以通过修改fstab表或者remount重新挂载)

3、慎用方法:关闭文件系统日志功能     tune2fs -O "^has_journal" 例如: tune2fs -O "^has_journal" /dev/mapper/VolGroup-lv_home

-----------------------------------------------------------------------

通过查资料,整理相关信息,解释如下;

1、jbd的全拼是journaling block driver 文件系统的日志功能,jbd2是ext4文件系统版本;可以肯定的是对文件系统的操作太频繁,导致IO压力过大。

常用的文件系统使用日志功能来保证文件系统的完整性,在写入新的数据到磁盘之前,会先将元数据写入日志;这样做可以保证在写入真实数据前后,一旦发生错误,

日志功能将很容易回滚到之前的状态,确保不会发生文件系统崩溃的情况;

2、而现在的磁盘上一般都配有内部缓存,以便重新调整批量数据的写入顺序,优化写入性能,因此文件系统必须在日志数据写入磁盘之后才能写commit(commit=xx 每xx秒同步所有的数据和元数据。默认是每5秒)记录;若commit记录写入在先,而日志有可能损坏,就会影响数据完整性;EXT4文件系统默认启用barrier功能,只有当barrier之前的数据全部写入磁盘,才能写barrier之后的数据;barrier的存在保证了数据完整性;

3、使用barrier特性的不利之处在于,需要付出降低性能的代价;可以通过挂载项 mount -o barrier=0来禁用此特性;

可通过查看/proc/mounts里的barrier值 为1代表启用

4、文件的写和请求会导致其中一个int型的值不断增大,最后超出了自身范围---变成负值,就会触发该bug;

具体原理参考下链接:

http://blog.donghao.org/2013/03/20/%E4%BF%AE%E5%A4%8Dext4%E6%97%A5%E5%BF%97%EF%BC%88jbd2%EF%BC%89bug/

5、所以我们可以通过降低文件系统的提交次数来缓解IO压力(相关参数commit);或者禁用barrier特性(相关参数barrier=0 );

而考虑到此bug网上已经有人提出了,貌似当时还有人提供了临时修复补丁,这么长时间过去之后,官方kernel里也应该做了相应的更新;所以当大家碰到这个问题时,首先的建议是

升级下kernel(升级之前建议做好数据备份),重启之后查看是否生效!

本文转自Jx战壕  51CTO博客,原文链接:http://blog.51cto.com/xujpxm/1674378,如需转载请自行联系原作者

JDB2导致磁盘io使用率高相关推荐

  1. jbd2导致磁盘io使用率高问题分析

    前几天碰到jbd2进程占用大量的磁盘io,用iotop查看到的情况大致如下: 系统版本:CentOS6.5-64bit 经查为ext4文件系统的一个bug: 先给出解决方案,处理此问题的优先级为: 1 ...

  2. jbd2导致系统IO使用率高问题

    收到IO占用高告警 系统信息:Linux version 2.6.32-696.18.7.1.el6.ucloud.x86_64 (root@59c188f3c79d) (gcc version 4. ...

  3. linux系统解决磁盘IO使用率很高

    1.查询 1.1,top 命令 查看wa 指标 top 命令通过查看 CPU 的 wa% 值来判断当前磁盘 IO 性能.如果这个数值过大,很可能是磁盘 IO 过高. 注意:如果 cpu 当前使用率已经 ...

  4. linux 磁盘并发io,Linux系统 磁盘IO过高排查总结

    最近做的一个电商网站因为磁盘 I/O 过高导致访问速度奇慢,问题存在两个月有余未得到解决办法.此次排查原因的经验可以作下次问题的参考. 1.会看懂 top 系统命令出来的各项参数.此次是无意中发现 u ...

  5. StarRocks过期数据清理导致磁盘IO飙升调查

    StarRocks过期数据清理导致磁盘IO飙升调查 背景 在StarRocks运行过程中,经常看见某一个be节点的磁盘IO忽然飙升几分钟,然后降下来. 调查结果 翻阅了一些日志和源码,找到了原因,记录 ...

  6. 一次 jbd2进程导致磁盘 io 高的分析解决过程

    故障现象 在3节点组成的大数据集群中,混部了 ES,kafka,zk,pg,mysql,spark,yarn,hdfs,以及业务的 etl 程序等组件.起初发现业务进程处理数据速度很慢,排查后发现数据 ...

  7. 面试官:磁盘 IO 变高,你怎么分析?

    点击上方蓝色"方志朋",选择"设为星标" 回复"666"获取独家整理的学习资料! 工具准备: iotop: http://guichaz.f ...

  8. linux系统硬盘使用过高,磁盘IO过高时的处理办法

    转: http://www.cnblogs.com/wjoyxt/p/4808024.html 针对系统中磁盘IO负载过高的指导性操作 主要命令: echo deadline > /sys/bl ...

  9. jdb2 mysql io_CentOS 6.4系统中jdb2进程占用io过高的解决方法

    某日在检测一系统性能时,发现io性能总是无故被消耗,即使应用程序很空闲,io使用程度也 很高. 使用iotop工具查看io情况. Total DISK READ: 0.00 B/s | Total D ...

最新文章

  1. GNSS系列--GNSS坐标系转换
  2. truncate数据后回收空间_Truncate用法详解
  3. svn 怎么直接同步指定服务器的某个文件夹
  4. C语言实现List实现(附完整源码)
  5. python 线程池_Python线程池及其原理和使用(超级详细)
  6. 面试题 : Intent、IntentFilter、PendingIntent的区别
  7. 大改革,GNOME 3.x将直接跳到GNOME 40
  8. HTML--HTML对象的关于位置和大小的属性的图解
  9. mailto发送邮件
  10. mysql 表结构反转_一道经典的MySQL面试题,答案出现三次反转
  11. java控制台进度_java进度条:控制台输出百分比示例代码
  12. mavonEditor编辑器的使用
  13. 基于VGG16主干模型的segnet语义分割详解及实例
  14. Http的三次握手与四次挥手的流程:SYN包--同步包 ACK包--应答包 FIN包--终止包
  15. 求最小公倍数的几种方法
  16. 电赛笔记【数模转换原理】
  17. vue中过滤器大全(一)【两位小数、银行卡号】
  18. echarts图表销毁
  19. Python复合梯形公式计算
  20. 容灾备份概念及实现方式

热门文章

  1. Google play billing(Google play 内支付)
  2. windows 开启防火墙策略允许ftp端口通过
  3. ZF1.* 愤怒小鸟系列二:快速自定义创建MVC
  4. VC 开机自动启动程序 方法
  5. 详解Ibatis写CLOB数据
  6. /dev/null 21
  7. springboot配置log4j
  8. mysql cmd链接不上数据库情况汇总
  9. 怎样理解阻塞非阻塞与同步异步的区别?
  10. 网络流量监控分析工具 Ntopng 安装