MySQL四种日志分析

心已赠人 2022-10-08 05:38 226阅读 0赞

# MySQL日志 #

在 MySQL 中，有 4 种不同的日志，分别是错误日志、二进制日志（BINLOG日志）、查询日志和慢查询日志，这些日志记录着数据库在不同方面的踪迹。

### 文章目录 ###

*  MySQL日志
 *   *  一、错误日志
     *  二、二进制日志
     *   *  1. 概述
         *  2. 日志格式
         *  3. 查看日志
         *   *  3.1 查看STATEMENT格式日志
             *  3.2 查看ROW格式日志
         *  4. 删除日志
     *  三、查询日志
     *  四、慢查询日志
     *   *  1. 文件位置和格式
         *  2. 日志的读取

## 一、错误日志 ##

错误日志是 MySQL 中最重要的日志之一，它记录了当 MySQL 启动和停止时，以及服务器在运行过程中发生任何严重错误时的相关信息，当数据库出现任何故障导致无法正常使用时，可以首先查看此日志。

该日志是默认开启的 ， 默认存放目录为 MySQL 的数据目录 `var/lib/mysql`，默认的日志文件名为 `hostname.err`（hostname是主机名）。

**查看日志位置 ：**

show variables like 'log_error%';

![image-20210618161833902][]

**查看日志内容 ：**

tail -f /var/lib/mysql/xaxh-server.err

![image-20210618161925888][]

## 二、二进制日志 ##

### 1. 概述 ###

二进制日志（BINLOG）记录了所有的 DDL（数据定义语言）语句和 DML（数据操作语言）语句，但是不包括数据查询语句。此日志对于灾难时的数据恢复起着极其重要的作用，MySQL的主从复制， 就是通过该日志实现的。

二进制日志默认情况下是没有开启的，需要到MySQL的配置文件中开启，并配置MySQL日志的格式。

**配置文件位置 :** `/usr/my.cnf`。

**日志存放位置 :** 配置时，如果给定了文件名但是没有指定路径，则日志默认写入MySQL的数据目录 `var/lib/mysql` 。

#配置开启binlog日志 
    log_bin=mysqlbin
    
    #生成的日志文件名前缀为mysqlbin，生成的文件名如：mysqlbin.000001,mysqlbin.000002
    
    #配置二进制日志的格式
    binlog_format=STATEMENT

### 2. 日志格式 ###

**STATEMENT**

该日志格式在日志文件中记录的都是SQL语句，每一条对数据进行修改的SQL都会记录在日志文件中，通过MySQL提供的 `mysqlbinlog` 工具，可以清晰的查看到每条语句的文本。

主从复制的时候，从库（slave）会将日志解析为原文本，并在从库重新执行一次。

**ROW**

该日志格式在日志文件中记录的是每一行的数据变更，而不是记录SQL语句。比如，执行SQL语句 ： `update tb_book set status='1'` , 如果是 STATEMENT 日志格式，在日志中会记录一行SQL语句； 如果是ROW，由于是对全表进行更新，也就是每一行记录都会发生变更，ROW格式的日志中会记录每一行的数据变更。

**MIXED**

这是目前MySQL默认的日志格式，混合了 STATEMENT 和 ROW 两种格式。默认情况下采用STATEMENT，但是在一些特殊情况下采用ROW来进行记录。MIXED格式能尽量利用两种模式的优点，而避开他们的缺点。

### 3. 查看日志 ###

由于日志以二进制方式存储，不能直接读取，需要用 `mysqlbinlog` 工具来查看，语法如下 ：

mysqlbinlog log-file;

#### 3.1 查看STATEMENT格式日志 ####

**执行插入语句 ：**

insert into tb_book values(null,'Lucene','2088-05-01','0');

**查看日志文件 ：**

![image-20210618162913334][]

`mysqlbin.index` : 该文件是日志索引文件，记录有几个日志文件

`mysqlbing.000001` ：具体的二进制日志文件

**查看日志内容 ：**

mysqlbinlog mysqlbing.000001;

![image-20210618163012954][]

#### 3.2 查看ROW格式日志 ####

**配置 :**

#配置开启binlog日志 
    log_bin=mysqlbin
    
    #配置二进制日志的格式
    binlog_format=ROW

**插入数据 :**

insert into tb_book values(null,'SpringCloud实战','2088-05-05','0');

**查看日志内容：**

#如果日志格式是ROW，直接查看数据是看不懂的，可以在mysqlbinlog后面加上参数-vv 
    mysqlbinlog -vv mysqlbin.000002;

![image-20210618163236389][]

### 4. 删除日志 ###

对于比较繁忙的系统，由于每天生成日志量大 ，这些日志如果长时间不清除，将会占用大量的磁盘空间。下面讲解几种删除日志的常见方法 ：

**方式一**

通过 `Reset Master` 指令删除全部 `binlog` 日志，删除之后，日志编号将从 xxxx.000001 重新开始 。

删除之前 ，先查询下日志文件，有两个 ：

![image-20210618163428270][]

执行删除日志指令：

Reset Master

执行之后， 查看日志文件，成功删除 ：

![image-20210618163503642][]

**方式二**

执行指令 `purge master logs to 'mysqlbin.******'`，该命令将删除 `******`编号之前的所有日志。

**方式三**

执行指令 `purge master logs before 'yyyy-mm-dd hh24:mi:ss'`，该命令将删除日志为 “yyyy-mm-dd hh24:mi:ss” 之前产生的所有日志 。

**方式四**

设置参数 `--expire_logs_days=#` ，此参数的含义是设置日志的过期天数， 过了指定的天数后日志将会被自动删除，这样有利于减少 DBA 管理日志的工作量。

配置如下 ：

![image-20210618163710220][]

## 三、查询日志 ##

查询日志中记录了客户端的所有操作语句（包括查询语句），而二进制日志不包含查询数据的SQL语句。

默认情况下， 查询日志是未开启的。如果需要开启查询日志，可以进行以下配置 ：

#该选项用来开启查询日志，0代表关闭，1代表开启 
    general_log=1
    
    #设置日志的文件名，如果没有指定，默认的文件名为host_name.log 
    general_log_file=file_name

在 MySQL的配置文件 `/usr/my.cnf` 中配置如下内容 ：

![image-20210618163955341][]

配置完毕之后，在数据库执行以下操作 ：

select * from tb_book;
    select * from tb_book where id = 1;
    update tb_book set name = 'lucene入门指南' where id = 5;
    select * from tb_book where id < 8;

执行完毕之后， 查询日志文件（MySQL 的数据目录 `var/lib/mysql`下） ：

![image-20210618164111665][]

## 四、慢查询日志 ##

慢查询日志记录了所有执行时间超过参数 `long_query_time` 值并且扫描记录数不小于 `min_examined_row_limit` 的所有SQL语句的日志。

`long_query_time` 默认为 10 秒，最小为 0， 精度可以到微秒。

### 1. 文件位置和格式 ###

慢查询日志默认是关闭的，可以通过两个参数来控制慢查询日志 ：

#该参数用来控制慢查询日志是否开启，1代表开启，0代表关闭
    slow_query_log=1 
    
    #该参数用来指定慢查询日志的文件名
    slow_query_log_file=slow_query.log
    
    #该参数用来配置查询的时间限制，超过这个时间将认为是慢查询，需要进行日志记录，默认10s
    long_query_time=10

### 2. 日志的读取 ###

和错误日志、查询日志一样，慢查询日志记录的格式也是纯文本，可以被直接读取。

**1） 查询long\_query\_time 的值**

![image-20210618164455322][]

**2） 执行查询操作1**

select id, title,price,num ,status from tb_item where id = 1;

![image-20210618164516098][]

由于该语句执行时间很短，为0s ， 所以不会记录在慢查询日志中。

**3） 执行查询操作2**

select * from tb_item where title like '%阿尔卡特 (OT-927) 炭黑 联通3G手机 双卡双待165454%';

![image-20210618164650402][]

该SQL语句执行时长为 26.77s ，超过10s ， 所以会记录在慢查询日志文件中。

**4） 查看慢查询日志文件**

直接通过 `cat` 指令查询该日志文件 ：

![image-20210618164802927][]

[image-20210618161833902]: /images/20221005/cd58e94b1c93452eaefbda038f1be003.png
[image-20210618161925888]: /images/20221005/5585d51af64346329239d99de1c62cb9.png
[image-20210618162913334]: /images/20221005/29d838cf1f9e4a68978583a3e05172f2.png
[image-20210618163012954]: /images/20221005/bad160d7d9db42ceb8ed0ee3d492c28e.png
[image-20210618163236389]: /images/20221005/77d2367868b24d45aace10d094f4b78f.png
[image-20210618163428270]: /images/20221005/c833467a8c0f4a858f8f12cd0eb2fa5d.png
[image-20210618163503642]: /images/20221005/fb4a070345dc4e729a9910eb4b55f2fd.png
[image-20210618163710220]: /images/20221005/2174efd4bb1c4120ac34799f150dc31a.png
[image-20210618163955341]: /images/20221005/a336210d843742eaa26224b0922439f0.png
[image-20210618164111665]: /images/20221005/7c3960244b284effbb6e39452ecf4c25.png
[image-20210618164455322]: /images/20221005/29ab0ac579c846dfa1ee5a0b6ca64359.png
[image-20210618164516098]: /images/20221005/859c206c6b4446c3b4ff51478c9d22be.png
[image-20210618164650402]: /images/20221005/6348f1031edc45d799fdd35f7f9d78bf.png
[image-20210618164802927]: /images/20221005/0fbedd4993ef48d6b98cc89f9fa7147f.png