Canal 就是一个同步增量数据的一个工具。
目录
- 概念
- Mysql开启binlog
- 是否开启binlog
- 开启binlog日志
- 创建授权用户
- 部署Canal
- 拉取镜像
- 挂载properties配置文件
- 创建容器
概念
canal是阿里巴巴旗下的一款开源项目，纯Java开发。基于数据库增量日志解析，提供增量数据订阅&消费，目前主要支持了MySQL（也支持mariaDB）
Mysql开启binlog
在部署Canal之前，需要先安装Mysql。
我用的是5.7.27的mysql
是否开启binlog
输入以下命令，查看是否开启binlog
为OFF则表示未开启binlog
show variables like 'log_bin';
开启binlog日志
修改mysql的配置文件，在[mysqld]下添加以下内容
# server_id不重复即可，不要和canal的slaveId重复
server_id=1
# 开启binlog
log_bin = mysql-bin
# 选择row模式
binlog_format = ROW
修改完毕，重启mysql
查看是否开启
创建授权用户
创建授权用户canal用于cannal服务监听mysql的binlog
# 新建用户 用户名：canal 密码：canal
CREATE USER canal IDENTIFIED by 'canal';
# 授权
GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 'canal'@'%';
# 刷新MySQL的系统权限相关表
FLUSH PRIVILEGES;
部署Canal
如果没有部署过docker，看我之前写的Linux部署Docker
拉取镜像
docker pull canal/canal-server:latest
挂载properties配置文件
先进行第一次运行，拷贝properties配置文件
docker run -p 11111:11111 --name canal -d canal/canal-server:latest
拷贝运行后的容器中配置文件，用来文件挂载
# 创建canal宿主机挂载目录
mkdir -p /opt/canal/conf
# 查看docker运行情况，复制容器id
docker ps
# 拷贝配置文件
docker cp 容器id:/home/admin/canal-server/conf/example/instance.properties /opt/canal/conf/
移除当前容器
docker stop canal
docker rm canal
修改配置文件
创建容器
运行新的容器，同时挂载修改后的配置文件
docker run -p 11111:11111 --name canal -v /opt/canal/conf/instance.properties:/home/admin/canal-server/conf/example/instance.properties -d canal/canal-server:latest
开放端口
firewall-cmd --zone=public --add-port=11111/tcp --permanent && firewall-cmd --reload
