今天我们看看关于MySQL慢日志的阅读。
我们知道,如果我们的语句不够优化,那么首先MySQL的慢日志是进一步优化的离线证据,虽然里面有好 多“伪慢语句”!
先不说怎么优化,如果你的日志有一条语句赌住了,那么会有不计其数的慢语句填充到MySQL的满日志里面。那么首先提炼出这些语 句就非常头疼。
今天主要介绍两种工具:
1,mysqldumpslow。(咱们 MySQL自带的简单而又实用的工具)

我们先来看下mysqldumpslow的结果。
[root@localhost ~]# mysqldumpslow -r localhost-slow.log

Reading mysql slow query log from localhost-slow.log
Count: 2  Time=7.00s (14s)  Lock=0.00s (0s)  Rows=0.0 (0), root[root]@localhost
  select * from t_page_sample order by id desc limit N,N

Count: 1  Time=11.00s (11s)  Lock=0.00s (0s)  Rows=1.0 (1), root[root]@localhost
  select count(*) from t_page_sample

Count: 1  Time=1418.00s (1418s)  Lock=0.00s (0s)  Rows=0.0 (0), root[root]@localhost
  insert ignore into t_page_sample select ceil(rand()*N), ceil(rand()*N), date_sub(now(),interval floor(rand()*N) day), now() from t_page_sample

比如要查找排序的慢语句:

[root@localhost ~]# mysqldumpslow -r -g "order by " localhost-slow.log

Reading mysql slow query log from localhost-slow.log
Count: 2  Time=7.00s (14s)  Lock=0.00s (0s)  Rows=0.0 (0), root[root]@localhost
  select * from t_page_sample order by id desc limit N,N

自带的mysqldumpslow简单 实用,作为我个人的首选。关于具体的参数含义,可以参见它自身的HELP。

2,mk-query-digest。(网上著名的开源脚本家族Maatkit中一员)

手 册地址:http://www.maatkit.org/doc/mk-query-digest.html

下载方法:wget http://www.maatkit.org/get/mk-query-digest

完了赋给它可执行权限就OK。

mk-query-digest 功能太多,我今天只是试了下它对MySQL慢日志的分析功能。

以下是我觉得比较实用的功能。

1)分析慢日志并且把找出来的语句写到规定的 表里。
[root@localhost ~]# ./mk-query-digest --limit 2 --select Query_time,Lock_time,Rows_sent,Rows_examined,ts --create-review-table --review D=t_girl,t=query_review localhost-slow.log

# 280ms user time, 80ms system time, 11.56M rss, 16.65M vsz
# Current date: Sat May  8 02:47:39 2010
# Files: localhost-slow.log
# Overall: 4 total, 3 unique, 0.01 QPS, 1.96x concurrency ________________
#                    total     min     max     avg     95%  stddev  median
# Exec time          1443s      5s   1418s    361s   1357s    584s    684s
# Lock time              0       0       0       0       0       0       0
# Rows sent              1       0       1    0.25    0.99    0.43       0
# Rows exam          6.98M   1.69M   1.89M   1.74M   1.86M  76.62k   1.69M
# Time range        2010-05-08 00:28:42 to 2010-05-08 00:40:58

# Profile
# Rank Query ID           Response time    Calls R/Call    Item
# ==== ================== ================ ===== ========= ===============
#    1 0x2A94F91D8C3B4B26  1418.0000 99.0%     1 1418.0000 INSERT SELECT t_page_sample
#    2 0x06754F1BD3C8D697    14.0000  1.0%     2    7.0000 SELECT t_page_sample

# Query 1: 0 QPS, 0x concurrency, ID 0x2A94F91D8C3B4B26 at byte 0 ________
# This item is included in the report because it matches --limit.
#              pct   total     min     max     avg     95%  stddev  median
# Count         25       1
# Exec time     98   1418s   1418s   1418s   1418s   1418s       0   1418s
# Lock time      0       0       0       0       0       0       0       0
# Rows sent      0       0       0       0       0       0       0       0
# Rows exam     27   1.89M   1.89M   1.89M   1.89M   1.89M       0   1.89M
# Time range 2010-05-08 00:28:42 to 2010-05-08 00:28:42
# Query_time distribution
#   1us
#  10us
# 100us
#   1ms
#  10ms
# 100ms
#    1s
#  10s+  ################################################################
# Review information
#    first_seen: 2010-05-08 00:28:42
#     last_seen: 2010-05-08 00:28:42
#   reviewed_by:
#   reviewed_on:
#      comments:
# Tables
#    SHOW TABLE STATUS FROM `t_girl` LIKE 't_page_sample'\G
#    SHOW CREATE TABLE `t_girl`.`t_page_sample`\G
insert ignore into t_page_sample select ceil(rand()*10000000), ceil(rand()*9), date_sub(now(),interval floor(rand()*20) day), now() from t_page_sample\G

# Query 2: 0.07 QPS, 0.47x concurrency, ID 0x06754F1BD3C8D697 at byte 1499
# This item is included in the report because it matches --limit.
#              pct   total     min     max     avg     95%  stddev  median
# Count         50       2
# Exec time      0     14s      5s      9s      7s      9s      3s      7s
# Lock time      0       0       0       0       0       0       0       0
# Rows sent      0       0       0       0       0       0       0       0
# Rows exam     48   3.39M   1.69M   1.69M   1.69M   1.69M       0   1.69M
# Time range 2010-05-08 00:40:28 to 2010-05-08 00:40:58
# Query_time distribution
#   1us
#  10us
# 100us
#   1ms
#  10ms
# 100ms
#    1s  ################################################################
#  10s+
# Review information
#    first_seen: 2010-05-08 00:40:28
#     last_seen: 2010-05-08 00:40:58
#   reviewed_by:
#   reviewed_on:
#      comments:
# Tables
#    SHOW TABLE STATUS FROM `t_girl` LIKE 't_page_sample'\G
#    SHOW CREATE TABLE `t_girl`.`t_page_sample`\G
# EXPLAIN
select * from t_page_sample order by id desc limit 4400000,2\G

[root@localhost ~]#

因为慢日志里面会有写和读语句,所以当以后想要分析某类语句时,只需要简单的SELECT即可出来。

mysql> select * from query_review where fingerprint like 'select%'\G

*************************** 1. row ***************************
   checksum: 465365117438580375
fingerprint: select * from t_page_sample order by id desc limit ?
     sample: select * from t_page_sample order by id desc limit 4400000,2
 first_seen: 2010-05-08 00:40:28
  last_seen: 2010-05-08 00:40:58
reviewed_by: NULL
reviewed_on: NULL
   comments: NULL
1 rows in set (0.00 sec)

2. 分析当前运行的SQL语句。

以 前我都是自己写脚本,配合CRONTAB来定时抓取信息到固定的文件里以备分析。不过现在可以用它来打印出比较详细的报告来。

[root@localhost ~]# ./mk-query-digest --select Query_time,Lock_time,Rows_sent,Rows_examined  --processlist h=localhost,u=root

# Caught SIGINT.

# 690ms user time, 2.4s system time, 11.27M rss, 16.41M vsz
# Current date: Sat May  8 03:17:39 2010
# Files: STDIN
# Overall: 1 total, 1 unique, 0 QPS, 0x concurrency ______________________
#                    total     min     max     avg     95%  stddev  median
# Exec time        1273313855s 1273313855s 1273313855s 1273313855s 1273313855s       0 1273313855s
# Lock time              0       0       0       0       0       0       0

# Profile
# Rank Query ID           Response time          Calls R/Call          Ite
# ==== ================== ====================== ===== =============== ===
#    1 0xB52E1970DE36E57F 1273313854.8595 100.0%     1 1273313854.8595 SELECT t_page_sample

# Query 1: 0 QPS, 0x concurrency, ID 0xB52E1970DE36E57F at byte 0 ________
# This item is included in the report because it matches --limit.
#              pct   total     min     max     avg     95%  stddev  median
# Count        100       1
# Exec time    100 1273313855s 1273313855s 1273313855s 1273313855s 1273313855s       0 1273313855s
# Lock time      0       0       0       0       0       0       0       0
# Query_time distribution
#   1us
#  10us
# 100us
#   1ms
#  10ms
# 100ms
#    1s
#  10s+  ################################################################
# Tables
#    SHOW TABLE STATUS FROM `t_girl` LIKE 't_page_sample'\G
#    SHOW CREATE TABLE `t_girl`.`t_page_sample`\G
# EXPLAIN
select count(*) from t_page_sample\G
[root@localhost ~]#

当 想停止截取当前语句时,按住CTRL+C就OK。

不过我还是喜欢我自己的那个小脚本。哈哈。

关于MySQL的慢日志分析工具相关推荐

  1. 数据库-优化-mysql慢查日志分析工具-mysqldumpslow介绍及用法

    MySQL慢查日志分析工具(mysqldumpslow) 1.介绍 如何进行查看慢查询日志,如果开启了慢查询日志,就会生成很多的数据,然后我们就可以通过对日志的分析,生成分析报表,然后通过报表进行优化 ...

  2. mysql慢查询日志分析工具比较_MySQL慢查询日志总结 日志分析工具mysqldumpslow

    慢查询日志概念 MySQL的慢查询日志是MySQL提供的一种日志记录,它用来记录在MySQL中响应时间超过阀值的语句,具体指运行时间超过long_query_time值的SQL,则会被记录到慢查询日志 ...

  3. anemometer mysql5.6_Anemometer|Anemometer(mysql慢查询日志分析工具)下载免费版 - 欧普软件下载...

    Anemometer是一款非常实用的mysql慢查询日志分析工具,该工具是基于LAMP编写的,使用前需要搭建LAMP环境,它能够实现慢查询日志收集信息,方便dba对数据库慢查询的观测和统计.需要的朋友 ...

  4. MySQL慢查询日志分析工具

    1.修改mysql配置文件开启慢查询: #开启慢查询日志 slow_query_log=on #设置慢查询阈值, 单位(秒) long_query_time=0.5 #设置慢查询日志文件地址 slow ...

  5. mysql mysqldumpslow_慢日志分析工具—mysqldumpslow 和 mysqlsla

    前提:分析mysql性能的时候会查看数据库的哪些sql语句有问题,效率低.这就用到了数据库的慢查询,作用就是: 它能记录下所有执行超过long_query_time时间的SQL语句,帮你找到执行慢的S ...

  6. mysql慢查询日志分析工具(python写的)

    D:\NormalSoftware>python mysql_filter_slow_log.py ./mysql1-slow.log --no-duplic ates --sort-avg-q ...

  7. MySQL慢查询日志分析(一)

    慢查询日志概念 MySQL的慢查询日志是MySQL提供的一种日志记录,它用来记录在MySQL中响应时间超过阀值的语句,具体指运行时间超过long_query_time值的SQL,则会被记录到慢查询日志 ...

  8. 数据库-优化-慢查日志分析工具-pt-query-digest介绍及作用

    MySQL慢查日志分析工具(pt-query-digest) 1.介绍及作用 作为一名优秀的mysql dba也需要有掌握几个好用的mysql管理工具,所以我也一直在整理和查找一些能够便于管理mysq ...

  9. 日志分析工具mysqldumpslow

    日志分析工具mysqldumpslow 在生产环境中,如果要手工分析日志,查找.分析SQL,显然是个体力活,MySQL提供了日志分析工具mysqldumpslow 查看mysqldumpslow的帮助 ...

最新文章

  1. Zookeeper服务端线程分析(单机)
  2. Python将图片转成pdf(高清)论文党用~
  3. 推荐美加版S3好用的两个ROM
  4. oracle有人用过fra吗,FRA(闪回恢复区)
  5. python数据生成pdf,Python生成pdf文件的方法
  6. QML 可以多选ComboBox的实现
  7. python测试udp端口_zabbix上使用外部检查的方式监测公网tcp/udp端口开放情况
  8. 使用Kotlin在活动之间进行Android意向处理
  9. JavaScript基础(三)
  10. 玩转大数据系列之二:数据分析与处理
  11. 【IIOT】欧姆龙PLC数采之NX/NJ系列
  12. QQ,MSN,旺旺在线客服代码
  13. mvn 命令指定jdk版本
  14. 高可用架构篇:【2】ActiveMQ高可用+负载均衡集群的安装、配置、高可用(多节点)
  15. json for modern c++,这是我用过的最好用的json库了
  16. 转载:ESP系统——ABS、TCS、VDC及VAF功能介绍
  17. Interpreting visually-grounded navigation instructions in real environments论文翻译
  18. GPS导航仪的全球与中国市场2022-2028年:技术、参与者、趋势、市场规模及占有率研究报告
  19. 华为智慧屏鸿蒙20,华为智慧屏SE系列首销 搭载鸿蒙分布式跨屏技术
  20. 微信应用架构!!-----微信应用能力篇

热门文章

  1. 【人脸表情识别】不得不读的重要论文推荐(2019-2020篇)
  2. 【CV秋季划】人脸算法那么多,如何循序渐进地学习好?
  3. 【杂谈】循序渐进,有三AI不得不看的技术综述(超过100篇核心干货)
  4. 【杂谈】有三AI不得不看的技术综述(超过100篇核心干货)
  5. 【杂谈】菜鸟误入linux会有哪些惨痛的经历
  6. 全球及中国绿色建筑产业规模现状与未来走势分析报告2022版
  7. File System Filter Driver Tutorial
  8. 济南长清区谋定特色展销中心 对话中国农民丰收节交易会
  9. git命令行删除远程分支
  10. 近期项目中用到的一些自己写的或者整理而成的前端效果干货(二)