MySQL(196)如何实现多源复制?

MySQL的多源复制(Multi-Source Replication)允许一个从服务器从多个主服务器复制数据。这在需要将多个数据源汇聚到一个数据库实例时非常有用,例如数据汇总和数据仓库场景。

一、多源复制原理

多源复制的原理与单源复制类似,但一个从服务器会有多个复制通道(Replication Channel),每个通道对应一个主服务器。每个通道独立工作,处理各自的二进制日志和中继日志。

二、多源复制配置步骤

2.1 主服务器配置

假设我们有两个主服务器(Master1和Master2)和一个从服务器(Slave)。我们需要配置两个主服务器,使它们能够与从服务器进行复制。

Master1配置
  1. 编辑Master1的MySQL配置文件(通常为/etc/my.cnf/etc/mysql/my.cnf):
ini 复制代码
[mysqld]
server-id = 1
log_bin = /var/log/mysql/mysql-bin.log
binlog_do_db = mydatabase1  # 指定需要复制的数据库
  1. 重启MySQL服务:
bash 复制代码
sudo systemctl restart mysql
  1. 创建复制用户并授予权限:
sql 复制代码
CREATE USER 'replica_user'@'%' IDENTIFIED BY 'replica_password';
GRANT REPLICATION SLAVE ON *.* TO 'replica_user'@'%';
FLUSH PRIVILEGES;
  1. 确定二进制日志文件名和位置:
sql 复制代码
SHOW MASTER STATUS;

输出示例:

plaintext 复制代码
+------------------+----------+--------------+------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB |
+------------------+----------+--------------+------------------+
| mysql-bin.000001 |      154 | mydatabase1  |                  |
+------------------+----------+--------------+------------------+
Master2配置

配置过程与Master1类似,确保server-id唯一。

  1. 编辑Master2的MySQL配置文件:
ini 复制代码
[mysqld]
server-id = 2
log_bin = /var/log/mysql/mysql-bin.log
binlog_do_db = mydatabase2  # 指定需要复制的数据库
  1. 重启MySQL服务:
bash 复制代码
sudo systemctl restart mysql
  1. 创建复制用户并授予权限:
sql 复制代码
CREATE USER 'replica_user'@'%' IDENTIFIED BY 'replica_password';
GRANT REPLICATION SLAVE ON *.* TO 'replica_user'@'%';
FLUSH PRIVILEGES;
  1. 确定二进制日志文件名和位置:
sql 复制代码
SHOW MASTER STATUS;

输出示例:

plaintext 复制代码
+------------------+----------+--------------+------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB |
+------------------+----------+--------------+------------------+
| mysql-bin.000001 |      200 | mydatabase2  |                  |
+------------------+----------+--------------+------------------+

2.2 从服务器配置

  1. 编辑从服务器的MySQL配置文件:
ini 复制代码
[mysqld]
server-id = 3
relay-log = /var/log/mysql/mysql-relay-bin
log_slave_updates = 1
  1. 重启MySQL服务:
bash 复制代码
sudo systemctl restart mysql
  1. 在从服务器上配置多个复制通道:
sql 复制代码
-- 配置从Master1复制的通道
CHANGE MASTER TO
MASTER_HOST='Master1_IP',
MASTER_USER='replica_user',
MASTER_PASSWORD='replica_password',
MASTER_LOG_FILE='mysql-bin.000001',  -- Master1的File值
MASTER_LOG_POS=154  -- Master1的Position值
FOR CHANNEL 'channel1';

-- 配置从Master2复制的通道
CHANGE MASTER TO
MASTER_HOST='Master2_IP',
MASTER_USER='replica_user',
MASTER_PASSWORD='replica_password',
MASTER_LOG_FILE='mysql-bin.000001',  -- Master2的File值
MASTER_LOG_POS=200  -- Master2的Position值
FOR CHANNEL 'channel2';
  1. 启动多个复制通道:
sql 复制代码
START SLAVE FOR CHANNEL 'channel1';
START SLAVE FOR CHANNEL 'channel2';
  1. 检查复制状态:
sql 复制代码
SHOW SLAVE STATUS FOR CHANNEL 'channel1'\G;
SHOW SLAVE STATUS FOR CHANNEL 'channel2'\G;

确保每个通道的Slave_IO_RunningSlave_SQL_Running都显示为Yes

三、处理冲突和监控

多源复制时可能会遇到冲突问题,例如两个主服务器同时修改相同的数据。处理冲突的方法包括:

  1. 应用层解决冲突

    • 在应用层确保不会出现冲突,例如通过数据分区。
  2. 使用复制过滤器

    • 在从服务器上使用复制过滤器,确保只接收特定表或数据库的修改。
ini 复制代码
[mysqld]
replicate-do-db = mydatabase1
replicate-do-db = mydatabase2
  1. 日常监控
    • 定期监控复制状态,确保没有出现延迟和错误。
sql 复制代码
SHOW SLAVE STATUS FOR CHANNEL 'channel1'\G;
SHOW SLAVE STATUS FOR CHANNEL 'channel2'\G;

四、总结

MySQL多源复制通过在从服务器上配置多个复制通道,实现从多个主服务器复制数据。配置多源复制需要确保每个主服务器和从服务器的server-id唯一,并分别配置和启动每个复制通道。处理多源复制中的冲突和定期监控复制状态,对于确保数据一致性和系统稳定性至关重要。

相关推荐
程序员cxuan30 分钟前
Grok Build 被众人唾骂,结果老马把它开源了
人工智能·后端·程序员
从零开始的代码生活_31 分钟前
C++ 继承详解:访问控制、对象模型、菱形继承与设计取舍
开发语言·c++·后端·学习·算法
Conan在掘金42 分钟前
�鸿蒙报错速查:Cannot find name 'require',禁用 require(),根因 + 真解法
后端
隔窗听雨眠1 小时前
Spring Boot在云原生时代的编程范式革新研究
spring boot·后端·云原生
一朵小花1 小时前
记一次Docker 容器 NFS 文件写入延迟排查过程
后端
FF2501_940228583 小时前
Grid 构建月历网格:7 列模板 + 日期占位算法
后端·华为·harmonyos·鸿蒙系统
神奇小汤圆3 小时前
线程池的 DiscardPolicy 为什么是「静默杀手」?一个生产事故的完整复盘
后端
大鸡腿同学3 小时前
个人博主 AI 剪辑实操:口播视频 3 步出片,省 80% 剪辑时间
后端
其美杰布-富贵-李3 小时前
Spring Boot 工程开发全流程说明
java·spring boot·后端
xianjixiance_3 小时前
HarmonyOS应用开发实战:萌宠日记 - 整体架构设计与技术选型解析
后端