Canal的入门操作记录

文章目录

canal其实就是假装自己是从数据库,来监听主数据库的binlog得到数据的变化信息
canal 模拟 MySQL slave 的交互协议,伪装自己为 MySQL slave ,向 MySQL master 发送dump 协议

MySQL master 收到 dump 请求,开始推送 binary log 给 slave (即 canal )

canal 解析 binary log 对象(原始为 byte 流)

1.主从数据库同步原理

2.canal使用步骤

2.1 开启binlog

yaml 复制代码
[mysqld]
log-bin=mysql-bin # 开启 binlog
binlog-format=ROW # 选择 ROW 模式
server_id=1
 # 配置 MySQL replaction 需要定义,不要和 canal 的 slaveId 重复

2.2 配置canal

canal.properties

  1. canal.ip:Canal Server所在机器的IP地址。
  2. canal.port:Canal Server监听的端口号。
  3. canal.destinations:指定需要同步的数据库实例名称,可以配置多个,以逗号分隔。
  4. canal.instance.master.address:MySQL主库的地址。
  5. canal.instance.master.journal.name:MySQL主库的binlog文件名。
  6. canal.instance.dbUsername:MySQL连接的用户名。
  7. canal.instance.dbPassword:MySQL连接的密码。

instance.properties

  1. canal.instance.mysql.slaveId:MySQL 从库的ID,用于标识不同的从库。
  2. canal.instance.master.address:MySQL 主库的地址
  3. canal.serverMode = tcp Canal 服务的模式,还有xxxMQ形式。

区别

  1. canal.properties:通常包含了全局性的配置项,适用于整个 Canal 服务实例。这些配置项会影响到 Canal 服务的整体行为,比如监听端口、IP 地址等。

  2. instance.properties:包含了特定数据库实例的配置信息,主要用于配置与该数据库实例相关的参数,如主从库地址、用户名密码、binlog 文件位置等。这些配置项是针对具体的数据库实例进行设置的,用于指定数据同步的源头。

3.创建Canal用户

sql 复制代码
CREATE USER canal IDENTIFIED BY 'canal';  
GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 'canal'@'%';
FLUSH PRIVILEGES;

4.取信息

5.SpringBoot整合

相关推荐
数据知道1 小时前
PostgreSQL 故障排查:如何找出数据库中最耗时的 SQL 语句
数据库·sql·postgresql
qq_12498707531 小时前
基于SSM的动物保护系统的设计与实现(源码+论文+部署+安装)
java·数据库·spring boot·毕业设计·ssm·计算机毕业设计
枷锁—sha1 小时前
【SRC】SQL注入WAF 绕过应对策略(二)
网络·数据库·python·sql·安全·网络安全
Coder_Boy_2 小时前
基于SpringAI的在线考试系统-考试系统开发流程案例
java·数据库·人工智能·spring boot·后端
Gain_chance2 小时前
35-学习笔记尚硅谷数仓搭建-DWS层最近n日汇总表及历史至今汇总表建表语句
数据库·数据仓库·hive·笔记·学习
此生只爱蛋2 小时前
【Redis】主从复制
数据库·redis
马猴烧酒.2 小时前
【面试八股|JAVA多线程】JAVA多线程常考面试题详解
java·服务器·数据库
天天爱吃肉82183 小时前
跟着创意天才周杰伦学新能源汽车研发测试!3年从工程师到领域专家的成长秘籍!
数据库·python·算法·分类·汽车
大巨头3 小时前
sql2008 数据库分页语句
数据库
m0_715575343 小时前
使用PyTorch构建你的第一个神经网络
jvm·数据库·python