Mysql 主从同步原理
就是基于数据库里面的那个 binlog 文件进行数据同步
具体步骤:
- step1:master将数据改变记录到二进制日志(binary log)中。
- step2: 当slave上执行 start slave 命令之后,slave会创建一个 IO 线程用来连接master,请求master中的binlog。
- step3:当slave连接master时,master会创建一个 log dump 线程,用于发送 binlog 的内容。在读取 binlog 的内容的操作中,会对主节点上的 binlog 加锁,当读取完成并发送给从服务器后解锁。
- step4:IO 线程接收主节点 binlog dump 进程发来的更新之后,保存到 中继日志(relay log) 中。
- step5:slave的SQL线程,读取relay log日志,并解析成具体操作,从而实现主从操作一致,最终数据一致。
2.主从配置
先规划一下:
- 主服务器:容器名mysql-master,端口3306
- 从服务器:容器名mysql-slave1,端口3307
- 从服务器:容器名mysql-slave2,端口3308
我们都使用 Docker 创建,在同一台虚拟机上面,保证它们的ip相同,端口号不同就行了
2.1 准备主数据库
step1:在docker中创建并启动MySQL主服务器
docker run -d \
-p 3306:3306 \
-v /usr/mysql/master/conf:/etc/mysql/conf.d \
-v /usr/mysql/master/data:/var/lib/mysql \
-e MYSQL_ROOT_PASSWORD=123456 \
--name mysql-master \
mysql:8.0.29
- 第三行,把容器内部的配置文件映射到宿主机上
- 第四行,把数据记录也映射到宿主机上
step2: 创建MySQL主服务器配置文件
vim /usr/mysql/master/conf/my.cnf
配置如下内容:
[mysqld]
# 服务器唯一id,默认值1
server-id=1
# 设置日志格式,默认值ROW
binlog_format=STATEMENT
# 二进制日志名,默认binlog
# log-bin=binlog
# 设置需要复制的数据库,默认复制全部数据库
#binlog-do-db=mytestdb
# 设置不需要复制的数据库
#binlog-ignore-db=mysql
#binlog-ignore-db=infomation_schema
重启MySQL容器:
docker restart mysql-master
binlog格式说明:
- binlog_format=STATEMENT:日志记录的是主机数据库的写指令,性能高,但是now()之类的函数以及获取系统参数的操作会出现主从数据不同步的问题。
- binlog_format=ROW(默认):日志记录的是主机数据库的写后的数据,批量操作时性能较差,解决now()或者 user()或者 @@hostname 等操作在主从机器上不一致的问题。
- binlog_format=MIXED:是以上两种level的混合使用,有函数用ROW,没函数用STATEMENT,但是无法识别系统变量
这个时候我们用数据库连接工具,比如:SQLyog、低版本的一些 Navicat 去连接数据库的话,会发现连接不上。
其实这个原因是因为 Mysql 8.0.* 密码验证的问题。我们进入 Mysql 容器内部改一下它验证密码的方式就可以了
step3: 使用命令行登录MySQL主服务器:
#进入容器:env LANG=C.UTF-8 避免容器中显示中文乱码
docker exec -it mysql-master env LANG=C.UTF-8 /bin/bash
#进入容器内的mysql命令行
mysql -uroot -p
#修改默认密码校验方式
ALTER USER 'root'@'%' IDENTIFIED WITH mysql_native_password BY '123456';
step4:主机中创建slave用户:
-- 创建slave用户
CREATE USER 'atguigu_slave'@'%';
-- 设置密码
ALTER USER 'atguigu_slave'@'%' IDENTIFIED WITH mysql_native_password BY '123456';
-- 授予复制权限
GRANT REPLICATION SLAVE ON *.* TO 'atguigu_slave'@'%';
-- 刷新权限
FLUSH PRIVILEGES;
step5:主机中查询master状态
SHOW MASTER STATUS;
(上面执行命令,千万别把分号复制掉了,不然执行不了)
记下File和Position的值。执行完此步骤后不要再操作主服务器MYSQL,防止主服务器状态值变化。
到这儿,我们的主 Master数据库 算是准备完毕