使用Canal将MySQL数据同步到ES（Linux）

一、Canal官网文档

去到官方文档根据官网文档进行操作：

QuickStart · alibaba/canal Wiki · GitHub阿里巴巴 MySQL binlog 增量订阅&消费组件 . Contribute to alibaba/canal development by creating an account on GitHub.[这里是图片002]https://github.com/alibaba/canal/wiki/QuickStart

二、开启服务器中MySQL的binlog

复制代码

[mysqld]
log-bin=mysql-bin # 开启 binlog
binlog-format=ROW # 选择 ROW 模式
server_id=1 # 配置 MySQL replaction 需要定义，不要和 canal 的 slaveId 重复

进行修改：

登录root

复制代码

mysql -uroot -p

CREATE USER canal IDENTIFIED BY 'canal';  
GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 'canal'@'%';
-- GRANT ALL PRIVILEGES ON *.* TO 'canal'@'%' ;
FLUSH PRIVILEGES;

改完后可以在MySQL命令行中使用下面的指令查看是否开启成功,value为ON就是开启成功：

复制代码

show variables like 'log_bin';

注意注意：记得修改后一定要重启MySQL，我就是因为忘记重启了找了一天的bug ，不记得重启会出现后面第八点那个问题。

三、将canal-deployer下载到服务器

Releases · alibaba/canal · GitHub阿里巴巴 MySQL binlog 增量订阅&消费组件 . Contribute to alibaba/canal development by creating an account on GitHub.[这里是图片008]https://github.com/alibaba/canal/releases

复制代码

cd /tmp/canal
tar zxvf canal.deployer-1.1.8-SNAPSHOT.tar.gz

解压后：

建议这边弄一个单独的文件夹把压缩包放进去再去解压，不然后面还有其他的会比较影响

弄一个类似这种文件夹，在对应的文件夹里面放压缩包，再去解压，后面我都是这种步骤，由于没有保留截图，上面那些还是最开始的演示，建议后面修改一下。

四、修改对应配置文件

五、启动canal 服务端

启动指令：

复制代码

sh bin/startup.sh

关闭指令：

复制代码

sh bin/stop.sh

参考：linux下启动Nacos报错解决：which: no javac in (/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin)_java_silence_fengxuan-GitCode 开源社区[这里是图片018]https://gitcode.csdn.net/66c6f8970bfad230b8ae80c9.html?dp_token=eyJ0eXAiOiJKV1QiLCJhbGciOiJIUzI1NiJ9.eyJpZCI6Mzg2MzQyMiwiZXhwIjoxNzMzNDk5ODYyLCJpYXQiOjE3MzI4OTUwNjIsInVzZXJuYW1lIjoicXFfNzM0NDA3NjkifQ.ePhIrfy6Hut8CjhuMD9jTFiIlnDuk4ArxnuI_l1Bkvc&spm=1001.2101.3001.6650.1&utm_medium=distribute.pc_relevant.none-task-blog-2_defaultBlogCommendFromBaidu_{activity-1-105581366-blog-125775825.235%5Ev43%5Epc_blog_bottom_relevance_base7&depth_1-utm_source=distribute.pc_relevant.none-task-blog-2}default_{BlogCommendFromBaidu}activity-1-105581366-blog-125775825.235%5Ev43%5Epc_blog_bottom_relevance_base7&utm_relevant_index=2

这个是我服务器jdk下载的位置，去找到自己对应的位置即可，后面我改用jdk11了，11是没问题的，记得17可能有些问题，可以参考下面这个步骤来就行，版本可以用11。

jdk下载可以参考这篇博客：

linux下载安装jdk教程_linux jdk下载-CSDN博客文章浏览阅读3.3k次，点赞16次，收藏27次。JDK是 Java 语言的软件开发工具包，它提供了开发和运行Java应用程序所需的工具、库和资源。_linux jdk下载[这里是图片019]https://blog.csdn.net/qq_44869932/article/details/141396367

编辑下面这个文件

在这个文件内添加下面信息

复制代码

export JAVA_HOME=/www/server/java/jdk-17.0.8/          
export JRE_HOME=$JAVA_HOME/jre
export CLASSPATH=$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH
export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$PATH