作者:宓祥康

爱可生交付服务部团队 DBA 擅长日志分析、问题排查等;主要负责处理 MySQL 与我司自研数据库自动化管理平台 DMP 的日常运维问题,对数据库及周边技术有浓厚的学习兴趣。

本文来源:原创投稿

爱可生开源社区出品,原创内容未经授权不得随意使用,转载请联系小编并注明来源。

引言

什么是 Slow Query Log?

该如何使用它?

它的存在对运维数据库有什么帮助呢?

一、 简介

慢查询日志,开启它我们可以通过参数来控制其记录执行或查询时间长的 SQL、全表扫描的 SQL、没有使用索引的 SQL。没错,它的作用就是记录哪些糟糕的、让数据库变慢的 SQL,把它们揪出来。

我们一般通过如下参数来控制 slow 的开启与记录:slow_query_log、slow_query_log_file、long_query_time、min_examined_row_limit、log_output、log_queries_not_using_indexes、log_throttle_queries_not_using_indexes。

slow_query_log:控制 slow_query_log 是否开启,参数 ON|OFF

slow_query_log_file:控制文件的写入位置,参数为文件的具体位置,如:/data/slow.log

long_query_time:设置 SQL 执行时间大于等于多少秒(可精确到微秒)时记录到日志中

min_examined_row_limit:设置检查的行数大于等于多少行时记录到日志中

log_output:设置慢查询记录到哪里,参数 FILE|TABLE

log_queries_not_using_indexes:控制查询过程中未使用索引或全表扫描的 SQL 是否记录到日志中

log_throttle_queries_not_using_indexes:开启 log_queries_not_using_indexes 后,此参数会限制每分钟可以写入慢速查询日志的此类查询的数量,参数设置 0 为不限制

二、查看方式与内容分析

慢日志分析的方式有两种,因为慢日志文件一般较小,所以一种方式为在慢日志文件中直接使用 less 或 more 命令来查看。第二种方式则是利用 MySQL 官方提供给我们的程序:mysqldumpslow 来快速查看 slowlog 日志中记录的慢 SQL。

对于我们详细来分析 SQL 的话,一般采用第一种方式,查找到对应时间点的对应 SQL 来进行分析。

show master status;

# Time: 2020-11-16T08:27:16.777259+08:00

# User@Host: root[root] @ [127.0.0.1] Id: 248

# Query_time: 15.293745 Lock_time: 0.000000 Rows_sent: 0 Rows_examined: 0

SET timestamp=1605486436;

那么如何读懂慢日志里面对这些信息呢?

show master status #慢 SQL

Time #出现该慢 SQL 的时间

query_time # SQL 语句的查询时间(在 MySQL 中所有类型的 SQL 语句执行的时间都叫做 query_time,而在 Oracle 中则仅指 select)

lock_time: #锁的时间

rows_sent: #返回了多少行,如果做了聚合就不准确了

rows_examined: #执行这条 SQL 处理了多少行数据

SET timestamp #时间戳

通过这些我们就可以来明确的知道一条 SQL 究竟执行了多长时间的查询,有没有发生锁等待,此查询实际在数据库中读取了多少行数据了。

三、如何在线安全清空 slow.log 文件

在开启 log_queries_not_using_indexes 后,slow log 文件不仅仅会记录慢查询日志,还会把查询过程中未使用索引或全表扫描的 SQL 记录到日志中,久而久之日志的空间便会变得越来越大,那么如何在线且安全的清空这些 slow log 日志,为磁盘释放空间呢?

MySQL 对于慢日志的输出方式支持两种,TABLE 和 FILE,查看方法如下:

mysql> show variables like '%log_output%';

+---------------+------------+

| Variable_name | Value |

+---------------+------------+

| log_output | FILE,TABLE |

+---------------+------------+

确认清楚输出方式后,可以分别对不同的输出方式选择不同的清空方法,本次将对两种清空方法共同介绍。

3.1 FILE 类型清空方法

查询 slow query log 开启状态

mysql> show variables like '%slow_query_log%';

+---------------------+-------------------------------------+

| Variable_name | Value |

+---------------------+-------------------------------------+

| slow_query_log | ON |

| slow_query_log_file | /opt/mysql/data/3306/mysql-slow.log |

+---------------------+-------------------------------------+

关闭 slow query log

mysql> set global slow_query_log=0;

确认关闭成功

mysql> show variables like '%slow_query_log%';

+---------------------+-------------------------------------+

| Variable_name | Value |

+---------------------+-------------------------------------+

| slow_query_log | OFF |

| slow_query_log_file | /opt/mysql/data/3306/mysql-slow.log |

+---------------------+-------------------------------------+

对日志进行重命名或移除

mv /opt/mysql/data/3306/mysql-slow.log /opt/mysql/data/3306/mysql-old-slow.log

重新开启 slow query log

mysql> set global slow_query_log=1;

执行 SQL 进行验证

mysql> select sleep(5);

+----------+

| sleep(5) |

+----------+

| 0 |

+----------+

验证新生成文件记录成功

cat /opt/mysql/data/3306/mysql-slow.log

[root@DMP1 3306]# cat mysql-slow.log

/opt/mysql/base/5.7.31/bin/mysqld, Version: 5.7.31-log (MySQL Community Server (GPL)). started with:

Tcp port: 3306 Unix socket: /opt/mysql/data/3306/mysqld.sock

Time Id Command Argument

# Time: 2021-01-05T13:26:44.001647+08:00

# User@Host: root[root] @ localhost [] Id: 81786

# Query_time: 5.000397 Lock_time: 0.000000 Rows_sent: 1 Rows_examined: 0

SET timestamp=1609824404;

select sleep(5);

清理旧的 slowlog 文件

mv /opt/mysql/data/3306/mysql-old-slow.log /mysqlback

3.2 TABLE 类型清空方法

先关闭 slow query log

mysql> set global slow_query_log=0;

确认关闭成功

mysql> show variables like 'slow_query_log';

+---------------------+-------------------------------------+

| Variable_name | Value |

+---------------------+-------------------------------------+

| slow_query_log | OFF |

+---------------------+-------------------------------------+

TABLE 类型的 slowlog 存放在 mysql.slow_log 表中,对 slow_log 进行重命名为 old_slow_log

mysql> use mysql

mysql> ALTER TABLE slow_log RENAME old_slow_log;

创建全新的 slow_log 文件拷贝原来 slow_log 文件的表结构

mysql> CREATE TABLE slow_log LIKE old_slow_log;

启动 slow query log

mysql> SET GLOBAL slow_query_log = 1;

测试验证

mysql> select sleep(5);

+----------+

| sleep(5) |

+----------+

| 0 |

+----------+

mysql> select * from slow_log \G

*************************** 1. row ***************************

start_time: 2021-01-05 13:49:13.864002

user_host: root[root] @ localhost []

query_time: 00:00:05.000322

lock_time: 00:00:00.000000

rows_sent: 1

rows_examined: 0

db: mysql

last_insert_id: 0

insert_id: 0

server_id: 874143039

sql_text: select sleep(5)

thread_id: 339487

删除旧的 slow_log 表

mysql> drop table old_slow_log;

总结

该文章主要讲述了 slow log 的开启方式、分析方法与清空操作,熟练使用分析 slow log 文件可以实时观察数据库 SQL 的执行情况,并为 SQL 优化奠定基础。

mysql slowlog中querytime分析_技术分享 | Slow Query Log 使用详解相关推荐

  1. 技术分享 | Slow Query Log 使用详解

    作者:宓祥康 爱可生交付服务部团队 DBA 擅长日志分析.问题排查等:主要负责处理 MySQL 与我司自研数据库自动化管理平台 DMP 的日常运维问题,对数据库及周边技术有浓厚的学习兴趣. 本文来源: ...

  2. suse查看mysql内存使用情况_MySQL 慢查询日志(Slow Query Log)

    4.格式化慢查询日志 结构化慢查询日志就是把慢查询日志中的重要信息按照便于阅读以及按照特定的排序方式来提取SQL. 这种方式有点类似于Oracle中有个tkprof来格式化oracle的trace文件 ...

  3. mysql优化说出九条_技术分享 | MySQL 优化:为什么 SQL 走索引还那么慢?

    原标题:技术分享 | MySQL 优化:为什么 SQL 走索引还那么慢? 背景 2019-01-11 9:00-10:00 一个 MySQL 数据库把 CPU 打满了. 硬件配置:256G 内存,48 ...

  4. mysql支持结构化查询语言_结构化查询语言(SQL)详解之一

    转载自:https://study.qqcf.com/web/168/19166.htm 一.SQL语句的分类 ANSI SQL语句分成以下六类(按使用频率排列): 数据查询语言(DQL):其语句,也 ...

  5. mysql性能优化 洪斌_技术分享 | InnoDB Cluster 如何高效加载数据

    作者:洪斌 爱可生南区负责人兼技术服务总监,MySQL ACE,擅长数据库架构规划.故障诊断.性能优化分析,实践经验丰富,帮助各行业客户解决 MySQL 技术问题,为金融.运营商.互联网等行业客户提供 ...

  6. mysql 走索引 很慢_技术分享 | MySQL优化:为什么SQL走索引还那么慢?

    作者:胡呈清 背景 2019-01-11 9:00-10:00 一个 MySQL 数据库把 CPU 打满了. 硬件配置:256G 内存,48 core 分析过程 接手这个问题时现场已经不在了,信息有限 ...

  7. mysql 如何设置延迟启动_技术分享 | MySQL 网络延时参数设置建议

    作者:毛思平 工作11年,从事数据库工作7年,主要在金融行业.主要是做oracle,mysql.现在在农行软开中心主要做数据库应用方面的研究. 本文来源:原创投稿 *爱可生开源社区出品,原创内容未经授 ...

  8. mysql批量添加报错_技术分享 | MySQL 在批量插入时捕捉错误信息

    原创: 杨涛涛 背景 本篇文章来源于今天客户问的一个问题. 问题大概意思是:我正在从 Oracle 迁移到 MySQL,数据已经转换为单纯的 INSERT 语句.由于语句很多,每次导入的时候不知道怎么 ...

  9. paypal中授权返回_微信开放平台授权登录流程详解

    最近在工作中用到了一些微信开放平台授权第三方登录,来获取用户基本信息的操作.看了一下微信给出的官方文档,写的已经很详细了,这里按照自己的步骤进行了一下总结,并附带了一些示例,方便大家理解. 微信公众号 ...

最新文章

  1. 使用admin lte 碰到访问Google字体的问题
  2. linux服务器性能监控命令汇总之dstat命令(二)
  3. Python骚操作:动态定义函数
  4. java 自定义tostring_Java 怎么写这个自定义class的toString方法?
  5. python数据源_python数据源
  6. hapi mysql项目实战路由初始化_用hapi.js mysql和nuxt.js(vue ssr)开发仿简书的博客项目...
  7. 日志规范之slf4j整合JDK14以及Simple的使用
  8. java 妖魔道-倩女幽魂_《倩女幽魂I-妖魔道》地图新手功略
  9. Spring注解中@Configuration和@Configurable的区别
  10. android自动让输入框上划,Android界面技巧:当输入法调出时,如何让界面自动上移,使输入法不会遮挡到主界面(Activity)...
  11. 解调去载波后均衡信道与实际信道的关系
  12. 最短路的几种算法及其优化(模板)
  13. HugeGraph 配置参数
  14. Web报表工具FineReport填报界面键盘操作
  15. MOD - Power Modulo Inverted(SPOJ3105) + Clever Y(POJ3243) + Hard Equation (Gym 101853G ) + EXBSGS
  16. 学习ES6路线了解图
  17. List分组 用于客服对话分组场景
  18. win7硬盘分区软件_系统软件
  19. usboot应用两篇:用USBOOT修理移动硬盘等
  20. 华为首度公开披露员工薪酬:去年平均年薪近28万

热门文章

  1. Fullpage参数说明
  2. js中 style.width与 offsetWidth的区别
  3. 使用的组件:ckeditor
  4. 自定义标签 (choose)
  5. CF#420 B. Okabe and Banana Trees 思维|暴力|几何
  6. java 反射 成员变量_java基础--反射(成员变量)
  7. scrapy ip地址 tcp time out_TCP的运作流程(一)——“三次握手”
  8. 系统mysql数据库服务器,系统mysql数据库服务器
  9. 626B. Cards
  10. 3493. 最大的和