原文：http://www.cnblogs.com/kerrycode/archive/2018/11/15/9963764.html
慢查询日志概念
MySQL的慢查询日志是MySQL提供的一种日志记录，它用来记录在MySQL中响应时间超过阀值的语句，具体指运行时间超过long_query_time值的SQL，则会被记录到慢查询日志中。long_query_time的默认值为10，意思是运行10S以上的语句。默认情况下，Mysql数据库并不启动慢查询日志，需要我们手动来设置这个参数，当然，如果不是调优需要的话，一般不建议启动该参数，因为开启慢查询日志会或多或少带来一定的性能影响。慢查询日志支持将日志记录写入文件，也支持将日志记录写入数据库表。
官方文档，关于慢查询的日志介绍如下（部分资料，具体参考官方相关链接）：
The slow query log consists of SQL statements that took more than long_query_time seconds to execute and required at least min_examined_row_limit rows to be examined. The minimum and default values of long_query_time are 0 and 10, respectively. The value can be specified to a resolution of microseconds. For logging to a file, times are written including the microseconds part. For logging to tables, only integer times are written; the microseconds part is ignored.
By default, administrative statements are not logged, nor are queries that do not use indexes for lookups. This behavior can be changed usinglog_slow_admin_statements and log_queries_not_using_indexes, as described later.
慢查询日志相关参数
MySQL 慢查询的相关参数解释：
slow_query_log ：是否开启慢查询日志，1表示开启，0表示关闭。
log-slow-queries ：旧版（5.6以下版本）MySQL数据库慢查询日志存储路径。可以不设置该参数，系统则会默认给一个缺省的文件host_name-slow.log
slow-query-log-file：新版（5.6及以上版本）MySQL数据库慢查询日志存储路径。可以不设置该参数，系统则会默认给一个缺省的文件host_name-slow.log
long_query_time ：慢查询阈值，当查询时间多于设定的阈值时，记录日志。
log_queries_not_using_indexes：未使用索引的查询也被记录到慢查询日志中（可选项）。
log_output：日志存储方式。log_output='FILE'表示将日志存入文件，默认值是'FILE'。log_output='TABLE'表示将日志存入数据库，这样日志信息就会被写入到mysql.slow_log表中。MySQL数据库支持同时两种日志存储方式，配置的时候以逗号隔开即可，如：log_output='FILE,TABLE'。日志记录到系统的专用日志表中，要比记录到文件耗费更多的系统资源，因此对于需要启用慢查询日志，又需要能够获得更高的系统性能，那么建议优先记录到文件。
慢查询日志配置
默认情况下slow_query_log的值为OFF，表示慢查询日志是禁用的，可以通过设置slow_query_log的值来开启，如下所示：
mysql> show variables like '%slow_query_log%';复制+---------------------+-----------------------------------------------+复制| Variable_name | Value |复制+---------------------+-----------------------------------------------+复制| slow_query_log | OFF |复制| slow_query_log_file | home/WDPM/MysqlData/mysql/DB-Server-slow.log |复制+---------------------+-----------------------------------------------+复制2 rows in set (0.00 sec)复制复制mysql> set global slow_query_log=1;复制Query OK, 0 rows affected (0.09 sec)复制复制mysql> show variables like '%slow_query_log%';复制+---------------------+-----------------------------------------------+复制| Variable_name | Value |复制+---------------------+-----------------------------------------------+复制| slow_query_log | ON |复制| slow_query_log_file | home/WDPM/MysqlData/mysql/DB-Server-slow.log |复制+---------------------+-----------------------------------------------+复制2 rows in set (0.00 sec)复制复制mysql>复制
使用set global slow_query_log=1开启了慢查询日志只对当前数据库生效，如果MySQL重启后则会失效。如果要永久生效，就必须修改配置文件my.cnf（其它系统变量也是如此）。例如如下所示：
修改my.cnf文件，增加或修改参数slow_query_log 和slow_query_log_file后，然后重启MySQL服务器，如下所示
slow_query_log =1
slow_query_log_file=/tmp/mysql_slow.log
关于慢查询的参数slow_query_log_file ，它指定慢查询日志文件的存放路径，系统默认会给一个缺省的文件host_name-slow.log（如果没有指定参数slow_query_log_file的话）
mysql> show variables like 'slow_query_log_file';复制+---------------------+-----------------------------------------------+复制| Variable_name | Value |复制+---------------------+-----------------------------------------------+复制| slow_query_log_file | home/WDPM/MysqlData/mysql/DB-Server-slow.log |复制+---------------------+-----------------------------------------------+复制1 row in set (0.00 sec)复制
那么开启了慢查询日志后，什么样的SQL才会记录到慢查询日志里面呢？ 这个是由参数long_query_time控制，默认情况下long_query_time的值为10秒，可以使用命令修改，也可以在my.cnf参数里面修改。关于运行时间正好等于long_query_time的情况，并不会被记录下来。也就是说，在mysql源码里是判断大于long_query_time，而非大于等于。从MySQL 5.1开始，long_query_time开始以微秒记录SQL语句运行时间，之前仅用秒为单位记录。如果记录到表里面，只会记录整数部分，不会记录微秒部分。
mysql> show variables like 'long_query_time%';复制+-----------------+-----------+复制| Variable_name | Value |复制+-----------------+-----------+复制| long_query_time | 10.000000 |复制+-----------------+-----------+复制1 row in set (0.00 sec)复制复制mysql> set global long_query_time=4;复制Query OK, 0 rows affected (0.00 sec)复制复制mysql> show variables like 'long_query_time';复制+-----------------+-----------+复制| Variable_name | Value |复制+-----------------+-----------+复制| long_query_time | 10.000000 |复制+-----------------+-----------+复制1 row in set (0.00 sec)复制
如上所示，我修改了变量long_query_time，但是查询变量long_query_time的值还是10，难道没有修改到呢？注意：使用命令 set global long_query_time=4修改后，需要重新连接或新开一个会话才能看到修改值。你用show variables like 'long_query_time'查看是当前会话的变量值，你也可以不用重新连接会话，而是用show global variables like 'long_query_time'; 如下所示：
在MySQL里面执行下面SQL语句，然后我们去检查对应的慢查询日志，就会发现类似下面这样的信息。
log_output 参数是指定日志的存储方式。log_output='FILE'表示将日志存入文件，默认值是'FILE'。log_output='TABLE'表示将日志存入数据库，这样日志信息就会被写入到mysql.slow_log表中。MySQL数据库支持同时两种日志存储方式，配置的时候以逗号隔开即可，如：log_output='FILE,TABLE'。日志记录到系统的专用日志表中，要比记录到文件耗费更多的系统资源，因此对于需要启用慢查询日志，又需要能够获得更高的系统性能，那么建议优先记录到文件。
mysql> show variables like '%log_output%';复制+---------------+-------+复制| Variable_name | Value |复制+---------------+-------+复制| log_output | FILE |复制+---------------+-------+复制1 row in set (0.00 sec)复制复制mysql> set global log_output='TABLE';复制Query OK, 0 rows affected (0.00 sec)复制复制mysql> show variables like '%log_output%';复制+---------------+-------+复制| Variable_name | Value |复制+---------------+-------+复制| log_output | TABLE |复制+---------------+-------+复制1 row in set (0.00 sec)复制复制mysql> select sleep(5) ;复制+----------+复制| sleep(5) |复制+----------+复制| 0 |复制+----------+复制1 row in set (5.00 sec)复制复制mysql>复制复制mysql> select * from mysql.slow_log;复制+---------------------+---------------------------+------------+-----------+-----------+---------------+----+----------------+-----------+-----------+-----------------+-----------+复制| start_time | user_host | query_time | lock_time | rows_sent | rows_examined | db | last_insert_id | insert_id | server_id | sql_text | thread_id |复制+---------------------+---------------------------+------------+-----------+-----------+---------------+----+----------------+-----------+-----------+-----------------+-----------+复制| 2016-06-16 17:37:53 | root[root] @ localhost [] | 00:00:03 | 00:00:00 | 1 | 0 | | 0 | 0 | 1 | select sleep(3) | 5 |复制| 2016-06-16 21:45:23 | root[root] @ localhost [] | 00:00:05 | 00:00:00 | 1 | 0 | | 0 | 0 | 1 | select sleep(5) | 2 |复制+---------------------+---------------------------+------------+-----------+-----------+---------------+----+----------------+-----------+-----------+-----------------+-----------+复制2 rows in set (0.00 sec)复制复制mysql>复制
系统变量log-queries-not-using-indexes：未使用索引的查询也被记录到慢查询日志中（可选项）。如果调优的话，建议开启这个选项。另外，开启了这个参数，其实使用full index scan的sql也会被记录到慢查询日志。
This option does not necessarily mean that no index is used. For example, a query that uses a full index scan uses an index but would be logged because the index would not limit the number of rows.
mysql> show variables like 'log_queries_not_using_indexes';复制+-------------------------------+-------+复制| Variable_name | Value |复制+-------------------------------+-------+复制| log_queries_not_using_indexes | OFF |复制+-------------------------------+-------+复制1 row in set (0.00 sec)复制复制mysql> set global log_queries_not_using_indexes=1;复制Query OK, 0 rows affected (0.00 sec)复制复制mysql> show variables like 'log_queries_not_using_indexes';复制+-------------------------------+-------+复制| Variable_name | Value |复制+-------------------------------+-------+复制| log_queries_not_using_indexes | ON |复制+-------------------------------+-------+复制1 row in set (0.00 sec)复制复制mysql>复制
系统变量log_slow_admin_statements表示是否将慢管理语句例如ANALYZE TABLE和ALTER TABLE等记入慢查询日志
mysql> show variables like 'log_slow_admin_statements';复制+---------------------------+-------+复制| Variable_name | Value |复制+---------------------------+-------+复制| log_slow_admin_statements | OFF |复制+---------------------------+-------+复制1 row in set (0.00 sec)复制复制mysql>复制
系统变量log_slow_slave_statements 表示
By default, a replication slave does not write replicated queries to the slow query log. To change this, use thelog_slow_slave_statements system variable.
When the slow query log is enabled, this variable enables logging for queries that have taken more than long_query_time seconds to execute on the slave. This variable was added in MySQL 5.7.1. Setting this variable has no immediate effect. The state of the variable applies on all subsequent START SLAVE statements.
参数--log-short-format
The server writes less information to the slow query log if you use the --log-short-format option.
Command-Line Format --log-short-formatPermitted Values Type booleanDefault FALSE
另外，如果你想查询有多少条慢查询记录，可以使用系统变量。
mysql> show global status like '%Slow_queries%';复制+---------------+-------+复制| Variable_name | Value |复制+---------------+-------+复制| Slow_queries | 2104 |复制+---------------+-------+复制1 row in set (0.00 sec)复制复制mysql>复制
日志分析工具mysqldumpslow
在生产环境中，如果要手工分析日志，查找、分析SQL，显然是个体力活，MySQL提供了日志分析工具mysqldumpslow
查看mysqldumpslow的帮助信息：
[root@DB-Server ~]# mysqldumpslow --help复制Usage: mysqldumpslow [ OPTS... ] [ LOGS... ]复制复制Parse and summarize the MySQL slow query log. Options are复制复制--verbose verbose复制--debug debug复制--help write this text to standard output复制复制-v verbose复制-d debug复制-s ORDER what to sort by (al, at, ar, c, l, r, t), 'at' is default复制al: average lock time复制ar: average rows sent复制at: average query time复制c: count复制l: lock time复制r: rows sent复制t: query time复制-r reverse the sort order (largest last instead of first)复制-t NUM just show the top n queries复制-a don't abstract all numbers to N and strings to 'S'复制-n NUM abstract numbers with at least n digits within names复制-g PATTERN grep: only consider stmts that include this string复制-h HOSTNAME hostname of db server for *-slow.log filename (can be wildcard),复制default is '*', i.e. match all复制-i NAME name of server instance (if using mysql.server startup script)复制-l don't subtract lock time from total time复制
-s, 是表示按照何种方式排序，
c: 访问计数
l: 锁定时间
r: 返回记录
t: 查询时间
al:平均锁定时间
ar:平均返回记录数
at:平均查询时间
-t, 是top n的意思，即为返回前面多少条的数据；
-g, 后边可以写一个正则匹配模式，大小写不敏感的；
比如
得到返回记录集最多的10个SQL。
mysqldumpslow -s r -t 10 /database/mysql/mysql06_slow.log
得到访问次数最多的10个SQL
mysqldumpslow -s c -t 10 /database/mysql/mysql06_slow.log
得到按照时间排序的前10条里面含有左连接的查询语句。
mysqldumpslow -s t -t 10 -g “left join” /database/mysql/mysql06_slow.log
另外建议在使用这些命令时结合 | 和more 使用 ，否则有可能出现刷屏的情况。
mysqldumpslow -s r -t 20 /mysqldata/mysql/mysql06-slow.log | more
参考资料：
https://dev.mysql.com/doc/refman/5.7/en/slow-query-log.html
https://dev.mysql.com/doc/refman/5.7/en/server-system-variables.html#sysvar_long_query_time
这里总结一下在工作当中遇到关于MySQL慢查询日志的相关细节问题，有些是释疑或自己有疑惑，自己测试验证、解惑方面的知识。此篇只是总结个人的一些经验，不足之处，敬请指正！
1： 为什么在慢查询日志里面出现Query_time小于long_query_time阀值的SQL语句呢？
例如，如下截图，long_query_time=5， 但是Query_time小于1秒的SQL都记录到慢查询日志当中了。
相信有些人遇到这个问题的时候觉得很奇怪，其实这个不是bug，而是你设置了系统变量log_queries_not_using_indexes ,这个系统变量开启后，
会将那些未使用索引的SQL也被记录到慢查询日志中，另外，full index scan的SQL也会被记录到慢查询日志。所以，当满足这些条件的SQL，即
使Query_time时间小于long_query_time的值，也会被记录到慢查询日志。
2： 使用日志分析工具mysqldumpslow分析有些日志非常慢，如何加快？
mysqldumpslow -s t -t 10 /var/lib/mysql/MyDB-slow.log
1: 出现这种情况是因为慢查询日志变得很大（个人遇到的案例，慢查询日志就有2G多了），所以，需要每天或每周切分慢查询日志。设置一个Crontab作业即可。
/var/lib/mysql/DB-Server-slow.log.20181112
/var/lib/mysql/DB-Server-slow.log.20181113
/var/lib/mysql/DB-Server-slow.log.20181114
/var/lib/mysql/DB-Server-slow.log.20181115
2: 开启了系统变量log_queries_not_using_indexes后，如果系统设计糟糕，未使用索引的SQL很多，那么这一类的日志可能会有很多，所以还有个特别的开关log_throttle_queries_not_using_indexes用于限制每分钟输出未使用索引的日志数量。
3：mysqldumpslow的生成报告中的Count、 Time、 Lock、Rows代表具体意思。
mysqldumpslow -s c -t 10 /var/lib/mysql/MyDB-slow.log 使用mysqldumpslow分析慢查询日志分析获取访问次数最多的10个SQL。
Count ： 表示这个SQL总共执行了195674次（慢查询日志中出现的次数）
Time 表示执行时间，后面括号里面的38s 表示这个SQL语句累计的执行耗费时间为38秒。其实就是单次执行的时间和总共执行消耗的时间的区别。
Lock 表示锁定时间，后面括号里面表示这些SQL累计的锁定时间为48s
Rows 表示返回的记录数，括号里面表示所有SQL语句累计返回记录数
然后我们看看慢查询日志的相关信息：
# Time: 2018-11-15T01:43:51.338167Z
这个表示日志记录的时间，确切的说是SQL执行完的时间点。注意这个时间有可能跟系统当前时间不一致，它可能是UTC时间。这个要看系统变量log_timestamps是UTC还是system。
mysql> show variables like 'log_timestamps';复制+----------------+-------+复制| Variable_name | Value |复制+----------------+-------+复制| log_timestamps | UTC |复制+----------------+-------+复制1 row in set (0.01 sec)复制复制mysql> set global log_timestamps=system;复制Query OK, 0 rows affected (0.00 sec)复制
# User@Host: xxx[xxx] @ [xxx.xxx.xxx.xxx] Id: 23781
客户端的账户信息，两个用户名（第一个是授权账户，第二个为登录账户），客户端IP地址，还有mysqld的线程ID。
# Query_time: 16.480118 Lock_time: 0.000239 Rows_sent: 1 Rows_examined: 348011
查询执行的信息，包括查询时长，锁持有时长，返回客户端的行数，优化器扫描行数。通常需要优化的就是最后一个内容，尽量减少SQL语句扫描的数据行数
#use xxx;
#SET timestamp=1542246231;
这个是时间戳，你可以将其转换为时间格式（注意时区），如下所示：
[root@mylnx02 ~]# date -d @1542246231
Thu Nov 15 09:43:51 CST 2018
[root@DB-Server ~]# date -d @1542246231
Wed Nov 14 20:43:51 EST 2018
4： 如何分析慢查询日志一段时间内的数据呢？
mysqldumpslow这款工具没有提供相关参数分析某个日期范围内的慢查询日志，也就是说没法提供精细的搜索、分析。如果要分析某段时间内的慢查询日志可以使用工具pt-query-digest
如果实在需要使用mysqldumpslow分析某段时间内的慢查询SQL，可以借助awk命令的帮助。如下样例所示
#取出一天时间的慢查询日志
# awk '/# Time: 2018-11-14/,/# Time: 2018-11-15/' DB-Server-slow.log > DB-Server-slow.log.20181114
#取出2018-11-14号4点到6点之间两个小时的数据
#awk '/# Time: 2018-11-14T04/,/# Time: 2018-11-14T06/' DB-Server-slow.log > slow_04_06.log
5： 关于慢查询日志中query_time和lock_time的关系。
只有当一个SQL的执行时间（不包括锁等待的时间 lock_time）>long_query_time的时候，才会判定为慢查询SQL；但是判定为慢查询SQL之后，输出的Query_time包括了（执行时间+锁等待时间），并且也会输出Lock_time时间。当一个SQL的执行时间（排除lock_time）小于long_query_time的时候（即使他锁等待超过了很久），也不会记录到慢查询日志当中的。
6: mysqldumpslow相关参数的详细信息
# mysqldumpslow --help复制Usage: mysqldumpslow [ OPTS... ] [ LOGS... ]复制复制Parse and summarize the MySQL slow query log. Options are复制复制--verbose verbose #显示详细信息复制--debug debug #调试模式下运行。复制--help write this text to standard output复制复制-v verbose #显示详细信息复制-d debug #调试模式下运行。复制-s ORDER what to sort by (al, at, ar, c, l, r, t), 'at' is default 排序方式，at是默认方式复制al: average lock time #平均锁定时间排序复制ar: average rows sent #平均发送行数排序复制复制at: average query time #平均查询时间排序复制复制c: count #执行次数排序复制复制l: lock time #锁定时间排序复制复制r: rows sent #总结果行数排序复制复制t: query time #总查询时间排序复制-r reverse the sort order (largest last instead of first)复制#倒序信息排序复制-t NUM just show the top n queries复制#只显示前n个查询复制-a don't abstract all numbers to N and strings to 'S'复制-n NUM abstract numbers with at least n digits within names复制-g PATTERN grep: only consider stmts that include this string复制#根据字符串筛选慢查询日志复制-h HOSTNAME hostname of db server for *-slow.log filename (can be wildcard),复制default is '*', i.e. match all复制#根据服务器名称选择慢查询日志复制-i NAME name of server instance (if using mysql.server startup script)复制#根据服务器MySQL实例名称选择慢查询日志。复制-l don't subtract lock time from total time复制#不要从总时间减去锁定时间复制
7: 系统变量Slow_queries会统计慢查询出现的次数。
mysql> show global status like '%slow%';复制+---------------------+--------+复制| Variable_name | Value |复制+---------------------+--------+复制| Slow_launch_threads | 0 |复制| Slow_queries | 120 |复制+---------------------+--------+复制
8：系统变量slow_launch_time 是什么？ 跟慢查询日志有关系吗？
如果创建线程需要的时间比slow_launch_time多，服务器会增加Slow_launch_threads的状态变量的数量。其实这个状态变量跟慢查询没有什么关系。之所以放到这里，是有人问过这个问题！
参考：https://rj03hou.github.io/mysql/MySQL慢查询时间分析/
