mysql的高可用性

前言

mysql的高可用性

mysql的两个日志系统 binglog和redo-log的

mysql是如何保证主从一致的

msyql是这么保证高可用的?


mysql的高可用性

一、mysql的高可用性

说到高可用性 其实就是通过binlog和redo-log两个日志系统和一主多从来实现的。

mysql的两个日志系统 binglog和redo-log的

binlog的写入机制

binlog写入的时候有一个自增id,比如要写入一个新的事务,那么就会在这个id上加上这个事务的长度。由于binlog的写入过程是需要保证一致的,因此无论事务多大都要一次写入。

如果在chche中写入不了就会先写入到磁盘中暂时存储。然后提交到文件系统的page,然后在sync到磁盘中,

binlog中有一个同步的参数 sync-binlog = 0时 每次事务不会sync到磁盘

sync-binlog = 1 时 每次都会写入到磁盘

sync-binlog = N时, N次事务之后会一起写入磁盘

redo-log的写入机制

redo-log的写入机制是会先写入到redo-log的buffer中,然后写入到 文件系统的page cache中 然后再写入到磁盘

同理也有参数可以控制

innodb-fluse** = 0 时只保留在redo-log buffer中,

= 1 时每次都写入到磁盘

= 2 时只保留在 文件系统的page cache

一般情况下都会设置成双1

那么你可以会问 这样不就导致写磁盘的次数多了吗 为什么还会提高效率

  1. 采用组提交的方式,对于redo-log ,会延迟提交,在binlog写入到buffer之后再提交,如果这时有多个事务 就会一起提交
  2. 顺序写比随机写要提高很多效率。
  3. binlog也可以通过参数设置 大于多少条|| 大于多长时间后提交

redo-log还有一个提交机制就是等到

1 如果buffer中的内存即将达到一半 就会触发写入磁盘

2 如果有其它事务写入磁盘,会顺带把准备好的数据写入到磁盘

二、mysql是如何保证主从一致的

主要是使用了binlog,binlog是mysql高可用中非常重要的一环。

从库通过读取binlog,然后写入到从库中,保证了数据的一致性。

binlog的日记有三种格式

  1. statement 这种格式会原封不动的记录sql文件,但是会有问题,比如delete from t where c >4 limit 1,在从库执行的时候可能会因为原则的索引不一样,导致排序之后的数据不一样,导致删除的数据不一致。
  2. row会详细的记录每一行的结果,定位到具体的表 具体的操作,以及操作哪一行。所以不会出现上面的问题,但是有一个缺点就是记录非常详细,会导致内存压力和性能压力,比如我要删除10w行数据,如果用sql记录就一行命令,但是如果使用row就会有不止是10w的binlog日志了。
  3. mixed mixed是statement和row的混合,就是为了解决row的缺点,mysql会自己判断使用statement还是row来存储

循环写入问题:

A,B互为备库即 mm型。那么是否会出现A写入B之后,B又重新写入A呢?

不会,mysql是通过binlog中的server id来确定每条数据的唯一性的。

A生成的binlog文件的server id,如果是读的B的那么生成的server id还是原来的,这样A读完之后生成的binlog给B,B发现是自己的server id就不写入了

三、 msyql是这么保证高可用的?

一般保证高可用的方式就是主从切换,一主多从等。

主备延迟:主备延迟是指,备库同步主库的延迟时间。

造成主备延迟的原因有

  1. 大事物
  2. 把大量的查询统计类功能放到了备库上导致压力过大。

主从切换的过程是 主库先变成可读状态,然后备库追上主库,之后备库变成可读写状态,

也可以不等同步完成就切换,但是会导致数据库不一致,如果binlog是row的情况下,会直接报错停止同步。不推荐

主库掉电 可不可以直接切从库?

不可以,因为切从库会导致数据不一致,并且有些事务还没有返回,连接从库之后会以为没有成功,但是在主库已经执行成功了

相关推荐
2401_891409268 小时前
期货量化用得上的几类行情数据:逐笔、Level2、分钟线和五档tick
数据库
海绵宝宝转agent9 小时前
基于Redis ZSet+AOP+注解实现限流注解算法
数据库·redis·算法
imDwAaY9 小时前
Redis 也能做消息队列?从 Stream 的存储讲到消费确认
数据库·redis·缓存
@Mike@10 小时前
13-数据库学习笔记(查询执行处理模型)
数据库·笔记·学习
弈栈录10 小时前
MySQL 事务、索引与锁:后端开发必须掌握的数据库基础
数据库·后端
96245610 小时前
餐饮 SaaS 优惠券系统架构演进(三):优惠计算引擎——商品级计价、冲突策略与优惠分摊
java·数据库·spring boot
染指111010 小时前
135.Agent-多Agent框架-LangChain多智能体(SubAgents子代理)
数据库·人工智能·设计模式·langchain·agent·agents
vx_Biye_Design10 小时前
springboot宠物领养与救助平台64334-计算机课程设计、毕业设计
java·vue.js·spring boot·后端·mysql·课程设计·宠物
Elastic 中国社区官方博客10 小时前
错误最多的服务运行正常:使用 ES|QL 从日志进行根因分析
大数据·运维·数据库·sql·elasticsearch·搜索引擎·全文检索
做运维的阿瑞11 小时前
mysql数据库视图笔记:创建、修改、删除与适用场景
数据库·笔记·mysql