mysql 主从复制与读写分离

[一主从复制概念介绍](#一主从复制概念介绍)

1，mysq支持的复制类型

2，主从复制原理

[3，主从复制过程](#3，主从复制过程)

3.1主从复制架构图

[3.2 文字描述](#3.2 文字描述)

[3.3 简单理解](#3.3 简单理解)

[4，MySQL主从复制延迟原因](#4，MySQL主从复制延迟原因)

5，解决MySQL主从复制延迟

[二读写分离概念介绍](#二读写分离概念介绍)

[5，目前较为常见的 MySQL 读写分离](#5，目前较为常见的 MySQL 读写分离)

[6，中间键Amoeba 的优势](#6，中间键Amoeba 的优势)

[三实验模拟mysql 主从复制](#三实验模拟mysql 主从复制)

1，实验环境

2，实验步骤

[2.1 做好实验准备](#2.1 做好实验准备)

[2.2 主从服务器时间同步](#2.2 主从服务器时间同步)

[2.3 更改主服务器的 mysql配置文件](#2.3 更改主服务器的 mysql配置文件)

[2.4 创建从服务器账号并授权](#2.4 创建从服务器账号并授权)

[2.5 更改从服务器的 mysql配置文件](#2.5 更改从服务器的 mysql配置文件)

[2.6 验证主从复制效果](#2.6 验证主从复制效果)

[四实验模拟msql 读写分离](#四实验模拟msql 读写分离)

[1，实验环境](#1，实验环境)

[2，66 服务器安装Amoeba](#2，66 服务器安装Amoeba)

[2.1 先安装jdk](#2.1 先安装jdk)

[2.2 再安装amoeba](#2.2 再安装amoeba)

[2.3 开放 Amoeba访问数据库权限](#2.3 开放 Amoeba访问数据库权限)

[2.4 配置 Amoeba读写分离，两个 Slave 读负载均衡](#2.4 配置 Amoeba读写分离，两个 Slave 读负载均衡)

[3 测试读写分离](#3 测试读写分离)

[3.1 55 客户机安装mariadb](#3.1 55 客户机安装mariadb)

[3.2 主服务器插数据](#3.2 主服务器插数据)

[3.3 从服务器关闭同步并插数据](#3.3 从服务器关闭同步并插数据)

[3.4 显示读写分离](#3.4 显示读写分离)

[3.5 显示同步](#3.5 显示同步)

[五实验总结](#五实验总结)

[六总结](#六总结)

[5，show slave status能看到哪些信息](#5，show slave status能看到哪些信息)

6,主从复制慢（延迟）会有哪些可能？怎么解决？

[7,mysql主从复制版本问题](#7,mysql主从复制版本问题)

一主从复制概念介绍

1，mysq支持的复制类型

（1）STATEMENT：基于语句的复制。在服务器上执行sql语句，在从服务器上执行同样的语句，mysql默认采用基于语句的复制，执行效率高。

（2）ROW：基于行的复制。把改变的内容复制过去，而不是把命令在从服务器上执行一遍。

（3）MIXED：混合类型的复制。默认采用基于语句的复制，一旦发现基于语句无法精确复制时，就会采用基于行的复制。

2，主从复制原理

为什么复制?保证数据的完整性

谁复制谁 ?slave角色复制 master角色的数据

数据放在什么地方? 二进制文件 mysql-bin-000001--->记录完整的sql slave复制二进制文件到本地节点，保存为中继日志文件方式最后基于这个中继日志进行恢复操作将执行的sql 同步到自己的数据库当中，达到与master 数据一致性

3，主从复制过程

3.1主从复制架构图

3.2 文字描述

（1）Master节点将数据的改变记录成二进制日志（bin log），当Master上的数据发生改变时，则将其改变写入二进制日志中。

（2）Slave节点会在一定时间间隔内对Master的二进制日志进行探测其是否发生改变，如果发生改变，则开始一个I/O线程请求 Master的二进制事件。

（3）同时Master节点为每个I/O线程启动一个dump线程，用于向其发送二进制事件，并保存至Slave节点本地的中继日志（Relay log）中，Slave节点将启动SQL线程从中继日志中读取二进制日志，在本地重放，即解析成 sql 语句逐一执行，使得其数据和 Master节点的保持一致，最后I/O线程和SQL线程将进入睡眠状态，等待下一次被唤醒。

注：
●中继日志通常会位于 OS 缓存中，所以中继日志的开销很小。
●复制过程有一个很重要的限制，即复制在 Slave上是串行化的，也就是说 Master上的并行更新操作不能在 Slave上并行操作。

3.3 简单理解

两个日志三个线程

二进制日志（主）：存增删改查

中继日志（从）：专门存主服务器过来的二进制日志

dump 线程（主）：会探测二进制文件是否更新若更新会告知从服务器 io 线程

io 线程（从）：从服务器io 线程发送请求 dump 线程把二进制日志搬过去

sql 线程（从）：ql 线程读取中继日志存放到磁盘

4，MySQL主从复制延迟原因

①，master服务器高并发，形成大量事务

②、网络延迟

③、主从硬件设备导致

（cpu主频、内存io、硬盘io）

④、本来就不是同步复制、而是异步复制

5，解决MySQL主从复制延迟

① 从库优化Mysql参数。比如增大innodb_buffer_pool_size，（缓存的意思）让更多操作在Mysql内存中完成，减少磁盘操作。

②，从库使用高性能主机。包括cpu强悍、内存加大。避免使用虚拟云主机，使用物理主机，这样提升了i/o方面性。

③，从库使用SSD磁盘

④，网络优化，避免跨机房实现同步

二读写分离概念介绍

1，什么是读写分离

读写分离，基本的原理是让主数据库处理事务性增、改、删操作（INSERT、UPDATE、DELETE），而从数据库处理SELECT查询操作。数据库复制被用来把事务性操作导致的变更同步到集群中的从数据库。
（主服务器只写一台或多台从服务器做读）

2，为什么要读写分离

因为数据库的"写"（写10000条数据可能要3分钟）操作是比较耗时的。

但是数据库的"读"（读10000条数据可能只要5秒钟）。

所以读写分离，解决的是，数据库的写入，影响了查询的效率。

3，什么时候要读写分离

数据库不一定要读写分离，如果程序使用数据库较多时，而更新少，查询多的情况下会考虑使用。利用数据库主从同步，再通过读写分离可以分担数据库压力，提高性能。

4，生产环境的必要性

在实际的生产环境中，对数据库的读和写都在同一个数据库服务器中，是不能满足实际需求的。无论是在安全性、高可用性还是高并发等各个方面都是完全不能满足实际需求的。因此，通过主从复制的方式来同步数据，再通过读写分离来提升数据库的并发负载能力。有点类似于rsync，但是不同的是rsync是对磁盘文件做备份，mysql主从复制是对数据库中的数据、语句做备份。

5，目前较为常见的 MySQL 读写分离

1）基于程序代码内部实现

在代码中根据 select、insert 进行路由分类，这类方法也是目前生产环境应用最广泛的。

优点是性能较好，因为在程序代码中实现，不需要增加额外的设备为硬件开支；缺点是需要开发人员来实现，运维人员无从下手。

但是并不是所有的应用都适合在程序代码中实现读写分离，像一些大型复杂的Java应用，如果在程序代码中实现读写分离对代码改动就较大。

2）基于中间代理层实现

代理一般位于客户端和服务器之间，代理服务器接到客户端请求后通过判断后转发到后端数据库，有以下代表性程序。

（1）MySQL-Proxy。MySQL-Proxy 为 MySQL 开源项目，通过其自带的 lua 脚本进行SQL 判断。

（2）Atlas。是由奇虎360的Web平台部基础架构团队开发维护的一个基于MySQL协议的数据中间层项目。它是在mysql-proxy 0.8.2版本的基础上，对其进行了优化，增加了一些新的功能特性。360内部使用Atlas运行的mysql业务，每天承载的读写请求数达几十亿条。支持事物以及存储过程。

（3）Amoeba。由陈思儒开发，作者曾就职于阿里巴巴。该程序由Java语言进行开发，阿里巴巴将其用于生产环境。但是它不支持事务和存储过程。

（4）mycat（生产环境用的比较多）

6，中间键Amoeba 的优势

由于使用MySQL Proxy 需要写大量的Lua脚本，这些Lua并不是现成的，而是需要自己去写。这对于并不熟悉MySQL Proxy 内置变量和MySQL Protocol 的人来说是非常困难的。

Amoeba是一个非常容易使用、可移植性非常强的软件。因此它在生产环境中被广泛应用于数据库的代理层。

三实验模拟mysql 主从复制

1，实验环境

99机器为主服务器 77,88 为两台从服务器

2，实验步骤

2.1 做好实验准备

第一步关闭所有机器防火墙

第二步将三台主机改名方便识别

2.2 主从服务器时间同步

99主服务器：

安装时间同步软件

写配置文件 (末尾添加)

启动 ntpd

77,88从服务器：

下载 ntpdate

进行时间同步先开启ntpd

再绝对路径执行ntpdate 加主服务器的ip

做计划任务让从一直时间同步

crontab -e

2.3 更改主服务器的 mysql配置文件

99主服务器

vim /etc/my.cn

2.4 创建从服务器账号并授权

99 服务器

给从服务器授权注意网段

刷新权限

显示主服务器状态

2.5 更改从服务器的 mysql配置文件

77,88 从服务器

第一步

写配置文件 vim /etc/my.cnf

第二步

systemctl restart mysqld

第三步

登录mysql 配置同步注意 master_log_file 和 master_log_pos 的值要与Master查询的一致

偏移量要和主服务器查询的一致二进制文件名也是

解释：连接主人

（主人是谁用户什么拿什么文件偏移量）

第四步

#启动同步，如有报错执行 reset slave;

第五步

show slave status\G #查看 Slave 状态

//确保 IO 和 SQL 线程都是 Yes，代表同步正常。

2.6 验证主从复制效果

99 服务机创建一个库

在从服务器能看到

四实验模拟msql 读写分离

1，实验环境

99 为mysql 主服务器 77，88 为mysql 从服务器 66为Amoeba 服务器

55 为客户机

2，66 服务器安装Amoeba

2.1 先安装jdk

获得两个安装包

安装jdk （java 软件的虚拟环境）

sql 复制代码

cp jdk-6u14-linux-x64.bin /usr/local/
#把二进制jdk 拖到 usr/bin

cd /usr/local/
chmod +x jdk-6u14-linux-x64
#加执行权限

./jdk-6u14-linux-x64.bin
#按yes，按enter   开始安装

mv jdk1.6.0_14/ /usr/local/jdk1.6
#改名  方便后续操作

vim /etc/profile

环境变量