MySQL--》日志与主从复制的实战技巧

日志：是记录数据库操作和事务的文件，主要用于帮助数据库管理员(DBA)跟踪、恢复数据以及进行故障排查，日志是MySQL数据库管理中非常重要的一部分，常见的日志类型有以下几种：

记录了当mysql启动或停止时以及服务器在运行过程中发生任何严重错误时的相关信息，当数据库出现任何故障导致无法正常使用时，建议首先查看此日志。

该日志是默认开启的，默认存放目录/var/log/，默认的日志文件名为mysql.log，查看日志位置命令如下所示：

sql 复制代码

show variables like '%log_error%'

执行如上命令之后可以看到我们查询到了当前的错误日志的文件目录，如下：

这里我们可以复制错误日志的目录，通过如下命令可以查询错误日志目录当中的前(后)50条数据：

sql 复制代码

-- linux系统下操作
head -n 50 /var/log/mysql/error.log -- 查看文件的前50条记录
tail -n 50 /var/log/mysql/error.log -- 查看错误日志文件的最后50条记录

记录了所有的DDL(数据定义语言)语句和DML(数据操纵语言)语句，但不包括数据查询(select、show)语句，其作用主要包括：1）灾难时的数据恢复；2）MySQL的主从复制

在MySQL8版本中默认二进制日志是开启着的，其涉及的参数如下所示：

sql 复制代码

show variables like '%log_bin%'

执行如上命令之后可以看到我们查询到了当前的二进制日志的文件信息，如下：

MySQL服务器中提供了多种格式来记录二进制日志，具体格式及特点如下所示：

日志格式	含义
statement	基于SQL语句的日志记录，记录的是SQL语句，对数据进行修改的SQL都会记录在日志文件中
row	基于行的日志记录，记录的是每一行的数据变更（默认）
mixed	混合了statement和row两种格式，默认采用statement，在某些特殊情况下会自动切换为row进行记录

我们可以通过如下命令进行查询当前的MySQL使用的二进制的日志格式是哪种：

sql 复制代码

show variables like '%binlog_format%';

由于日志是以二进制方式存储的，不能直接读取，需要通过二进制日志查询工具mysqlbinlog来查看，其使用命令如下所示：

sql 复制代码

// 参数选项
// -d：指定数据库名称，只列出指定的数据库相关操作
// -o：忽略掉日志中的前n行命令
// -v：将行事件(数据变更)重构为SQL语句
// -w：将行事件(数据变更)重构为SQL语句，并输出注释信息
mysqlbinlog [参数选项] log的文件名称

对于比较繁忙的业务系统，每天生成的binlog数据巨大，如果长时间不清楚将会占用大量磁盘空间，可以通过如下几种方式进行日志的清理：

指令	含义
reset master	删除全部binlog日志，删除之后日志编号将从binlog.00001重新开始
purge master logs to 'binlog.***'	删除****编号之前的所有日志
purge master logs before 'yyyy-mm-dd hh:mi:ss'	删除日志为'yyyy-mm-dd hh:mi:ss'之前产生的所有日志

当然我们也可以在mysql的配置文件中配置二进制日志的过期时间，设置了之后二进制日志过期会自动删除，如下所示：

sql 复制代码

show variabels like '%binlog_expire_logs_seconds%';

记录了客户端的所有操作语句，而二进制日志不包含查询数据的SQL语句,默认情况下查询日志是未开启的,如果需要开启查询日志可以设置以下配置：

sql 复制代码

show variables like '%general%';

修改MySQL的配置文件/etc/my.cnf文件，添加如下内容：

sql 复制代码

#该选项用来开启查询日志，可选值：0或者1；0代表关闭，1代表开启
general _log=1

#设置日志的文件名，如果没有指定，默认的文件名为host_name.log
general_log_file=mysql_query.log

记录了所有执行时间超过参数long_query_time设置值并且扫描记录数不小于 min_examined_row_limit的所有的SQL语句的日志，默认未开启。long_query_time默认为 10秒，最小为0，精度可以到微秒，其配置命令如下所示：

sql 复制代码

# 慢查询日志
show_query_log=1

# 执行时间参数
long_query_time=2

默认情况下慢查询日志不会记录管理语句，也不会记录不使用索引进行查找的查询，可以使log_slow_admin_statements和更改此行为log_queries_not_using_indexes，如下所述：

sql 复制代码

#记录执行较慢的管理语句
log_slow_admin_statements = 1

#记录执行较慢的未使用索引的语句
log_queries_not_using_indexes = 1

主从复制：是指将主数据库的DDL和DML操作通过二进制日志传到从库服务器中，然后在从库上对这些日志重新执行(也叫重做)，从而使得从库和主库的数据保持同步。MySQL支持一台主库同时向多台从库进行复制，从库同时也可以作为其他从服务器的主库,实现链状复制，如下图所示：

MySQL复制的有点主要包含以下三个方面：

1）主库出现问题，可以快速切换到从库提供服务

2）实现读写分离，降低主库的访问压力

3）可以在从库中执行备份，以避免备份期间影响主库服务

主从复制的原理如下所示，从下图来看，主从复制共分为三步：

1）Master主库在事务提交时，会把数据变更记录在二进制日志文件Binlog中。

2）从库读取主库的二进制日志文件Binlog，写入到从库的中继日志Relay Log。

3）slave重做中继日志中的事件，将改变反映它自己的数据。