JavaEE技术之MySql高级-搭建主从复制(主从同步原理、一主多从配置)

news2024/10/7 8:20:37

文章目录

  • MySQL主从同步
    • 1、MySQL主从同步原理
    • 2、一主多从配置
      • 2.1、准备主服务器
      • 2.2、准备从服务器
      • 2.3、启动主从同步
      • 2.4、实现主从同步
      • 2.5、停止和重置
      • 2.6、常见问题
        • 问题1
        • 问题2

MySQL主从同步

1、MySQL主从同步原理

在这里插入图片描述

基本原理：

slave会从master读取binlog来进行数据同步

具体步骤：

  • step1：master将数据改变记录到二进制日志（binary log）中。这些记录过程叫做二进制日志事件（binary log events）。
  • step2：当slave连接master时，master会创建一个 log dump 线程，用于发送 binlog 的内容。在读取 binlog 的内容的操作中，会对主节点上的 binlog 加锁，当读取完成并发送给从服务器后解锁。
  • step3： 当slave上执行 start slave 命令之后，slave会创建一个 IO 线程用来连接master，请求master中的binlog。IO 线程接收主节点 binlog dump 进程发来的更新之后，保存到 relay log 中。
  • step4：slave的SQL线程，读取relay log日志，并解析成具体操作，从而实现主从操作一致，最终数据一致。

2、一主多从配置

服务器规划：使用docker方式创建，主从服务器IP一致，端口号不一致

在这里插入图片描述

  • 主服务器：容器名atguigu-mysql-master，端口3316
  • 从服务器：容器名atguigu-mysql-slave1，端口3317
  • 从服务器：容器名atguigu-mysql-slave2，端口3318

**注意：**如果此时防火墙是开启的，则先关闭防火墙，并重启docker，否则后续安装的MySQL无法启动

#关闭docker
systemctl stop docker
#关闭防火墙
systemctl stop firewalld
#启动docker
systemctl start docker

2.1、准备主服务器

  • step1：在docker中创建并启动MySQL主服务器：端口3306
docker run -d \
-p 3306:3306 \
-v /atguigu/mysql/master/conf:/etc/mysql/conf.d \
-v /atguigu/mysql/master/data:/var/lib/mysql \
-e MYSQL_ROOT_PASSWORD=123456 \
--name atguigu-mysql-master \
mysql:8.0.29
  • step2：创建MySQL主服务器配置文件：

默认情况下MySQL的binlog日志是自动开启的，可以通过如下配置定义一些可选配置

vim /atguigu/mysql/master/conf/my.cnf

配置如下内容

[mysqld]
# 服务器唯一id，默认值1
server-id=1
# 设置日志格式，默认值ROW
binlog_format=STATEMENT
# 二进制日志名，默认binlog
# log-bin=binlog
# 设置需要复制的数据库，默认复制全部数据库
binlog-do-db=mydb
# 设置不需要复制的数据库
binlog-ignore-db=mysql
#binlog-ignore-db=infomation_schema

重启MySQL容器

docker restart atguigu-mysql-master

binlog格式说明：

  • binlog_format=STATEMENT：日志记录的是主机数据库的写指令，性能高，但是now()之类的函数以及获取系统参数的操作会出现主从数据不同步的问题。
  • binlog_format=ROW（默认）：日志记录的是主机数据库的写后的数据，批量操作时性能较差，解决now()或者 user()或者 @@hostname 等操作在主从机器上不一致的问题。
  • binlog_format=MIXED：是以上两种level的混合使用，有函数用ROW，没函数用STATEMENT，但是无法识别系统变量

binlog-ignore-db和binlog-do-db的优先级问题：

在这里插入图片描述

  • step3：使用命令行登录MySQL主服务器：
#进入容器：env LANG=C.UTF-8 避免容器中显示中文乱码
docker exec -it atguigu-mysql-master env LANG=C.UTF-8 /bin/bash
#进入容器内的mysql命令行
mysql -uroot -p
#修改默认密码插件
ALTER USER 'root'@'%' IDENTIFIED WITH mysql_native_password BY '123456';
  • step4：主机中创建slave用户：
-- 创建slave用户
CREATE USER 'atguigu_slave'@'%';
-- 设置密码
ALTER USER 'atguigu_slave'@'%' IDENTIFIED WITH mysql_native_password BY '123456';
-- 授予复制权限
GRANT REPLICATION SLAVE ON *.* TO 'atguigu_slave'@'%';
-- 刷新权限
FLUSH PRIVILEGES;
  • step5：主机中查询master状态：

执行完此步骤后不要再操作主服务器MYSQL，防止主服务器状态值变化

SHOW MASTER STATUS;

记下File和Position的值。执行完此步骤后不要再操作主服务器MYSQL，防止主服务器状态值变化。

在这里插入图片描述

2.2、准备从服务器

可以配置多台从机slave1、slave2…，这里以配置slave1为例

  • step1：在docker中创建并启动MySQL从服务器：端口3307
docker run -d \
-p 3317:3306 \
-v mysql-slave1-conf:/etc/mysql/conf.d \
-v mysql-slave1-data:/var/lib/mysql \
-e MYSQL_ROOT_PASSWORD=123456 \
--name atguigu-mysql-slave1 \
mysql:8
  • step2：创建MySQL从服务器配置文件：
vim /var/lib/docker/volumes/mysql-slave1-conf/_data/my.cnf

配置如下内容：

[mysqld]
# 服务器唯一id，每台服务器的id必须不同，如果配置其他从机，注意修改id
server-id=2
# 中继日志名，默认xxxxxxxxxxxx-relay-bin
#relay-log=relay-bin

重启MySQL容器

docker restart atguigu-mysql-slave1
  • step3：使用命令行登录MySQL从服务器：
#进入容器：
docker exec -it atguigu-mysql-slave1 env LANG=C.UTF-8 /bin/bash
#进入容器内的mysql命令行
mysql -uroot -p
#修改默认密码插件
ALTER USER 'root'@'%' IDENTIFIED WITH mysql_native_password BY '123456';
  • step4：在从机上配置主从关系：

在从机上执行以下SQL操作

CHANGE MASTER TO MASTER_HOST='192.168.100.201', 
MASTER_USER='atguigu_slave',MASTER_PASSWORD='123456', MASTER_PORT=3306,
MASTER_LOG_FILE='binlog.000003',MASTER_LOG_POS=1357;

2.3、启动主从同步

启动从机的复制功能，执行SQL：

START SLAVE;
-- 查看状态（不需要分号）
SHOW SLAVE STATUS\G

**两个关键进程：**下面两个参数都是Yes，则说明主从配置成功！

在这里插入图片描述

2.4、实现主从同步

在主机中执行以下SQL，在从机中查看数据库、表和数据是否已经被同步

CREATE DATABASE mydb;
USE mydb;
CREATE TABLE t_user (
 id BIGINT AUTO_INCREMENT,
 uname VARCHAR(30),
 PRIMARY KEY (id)
);
INSERT INTO t_user(uname) VALUES('zhang3');
INSERT INTO t_user(uname) VALUES(@@hostname);

2.5、停止和重置

需要的时候，可以使用如下SQL语句

-- 在从机上执行。功能说明：停止I/O 线程和SQL线程的操作。
stop slave; 

-- 在从机上执行。功能说明：用于删除SLAVE数据库的relaylog日志文件，并重新启用新的relaylog文件。
reset slave;

-- 在主机上执行。功能说明：删除所有的binglog日志文件，并将日志索引文件清空，重新开始所有新的日志文件。
-- 用于第一次进行搭建主从库时，进行主库binlog初始化工作；
reset master;

2.6、常见问题

问题1

启动主从同步后，常见错误是Slave_IO_Running： No 或者 Connecting 的情况，此时查看下方的 Last_IO_ERROR错误日志，根据日志中显示的错误信息在网上搜索解决方案即可

在这里插入图片描述

典型的错误例如：Last_IO_Error: Got fatal error 1236 from master when reading data from binary log: 'Client requested master to start replication from position > file size'

解决方案：

-- 在从机停止slave
SLAVE STOP;

-- 在主机查看mater状态
SHOW MASTER STATUS;
-- 在主机刷新日志
FLUSH LOGS;
-- 再次在主机查看mater状态（会发现File和Position发生了变化）
SHOW MASTER STATUS;
-- 修改从机连接主机的SQL，并重新连接即可
问题2

启动docker容器后提示 WARNING: IPv4 forwarding is disabled. Networking will not work.

在这里插入图片描述

此错误，虽然不影响主从同步的搭建，但是如果想从远程客户端通过以下方式连接docker中的MySQL则没法连接

C:\Users\administrator>mysql -h 192.168.100.201 -P 3306 -u root -p

解决方案：

#修改配置文件：
vim /usr/lib/sysctl.d/00-system.conf
#追加
net.ipv4.ip_forward=1
#接着重启网络
systemctl restart network

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/1649082.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

python中如何遍历字典

python中如何遍历字典

1. 遍历字典的键key ① >>> d{list:[1, 2, 3],1:123,111:python3,tuple:(4, 5, 6)} >>> for key in d:print(str(key):str(d[key])) list:[1, 2, 3] 1:123 111:python3 tuple:(4, 5, 6) ② >>> d{list:[1, 2, 3],1:123,111:python3,tuple:(4, 5, 6…
阅读更多...
书生·浦语大模型实战营之手把手带你评测 Llama 3 能力（OpenCompass 版）

书生·浦语大模型实战营之手把手带你评测 Llama 3 能力（OpenCompass 版）

书生浦语大模型实战营之手把手带你评测 Llama 3 能力（OpenCompass 版） 环境配置 conda create -n llama3 python3.10 pytorch torchvision pytorch-cuda -c nvidia -c pytorch -y conda activate llama3conda install git git-lfs install✨下载 Llama3…
阅读更多...
cpp-类知识点完整思维导图！

cpp-类知识点完整思维导图！

阅读更多...
HP Z620 服务器打开VTx虚拟技术

HP Z620 服务器打开VTx虚拟技术

在使用Virtual Box的时候，虚拟主机启动报错：提示需要VTx。于是到bios里面去设置VTx。 这里有个小坑，就是HP 的bios配置里面，VTx不在常规的“System Configuration”、“Advanced”等地方，而是在“Security”菜单里&…
阅读更多...
nvcc: command not found

nvcc: command not found

nvcc: command not found nvcc命令是 NVIDIA CUDA 编译器，就类似于gcc是c语言的编译器，用于编译 CUDA 代码并生成 GPU 可执行文件。由于程序是要经过编译器编程成可执行的二进制文件，而cuda程序有两种代码，一种是运行在CPU上的ho…
阅读更多...
营销5.0时代，企业的痛如何解？

营销5.0时代，企业的痛如何解？

进入营销5.0阶段之后，许多企业都需解决连接客户效能低下的问题。针对这个问题，产品经理、软件开发公司包括个人开发者，要怎么找到有效的“解药”？ 营销不仅每年都在变化，甚至每天都在变化。 ——现代营销学之父&…
阅读更多...
js实现json数据可编辑

js实现json数据可编辑

背景 项目中有低代码平台，由于历史脏数据和非同步编辑的问题，偶尔会出现数据错乱的问题，希望有一个快捷的方式修改数据 之前在用Formily的时候有注意到designable/react 里面的json数据编辑功能非常不错如果能应用到项目里就完美了 design…
阅读更多...
《架构风清扬-Java面试系列第29讲》聊聊DelayQueue的使用场景

《架构风清扬-Java面试系列第29讲》聊聊DelayQueue的使用场景

DelayQueue是BlockingQueue接口的一个实现类之一 这个属于基础性问题，老规矩，我们将从使用场景和代码示例来进行讲解 来，思考片刻，给出你的答案 1，使用场景 实现：延迟队列，其中元素只有在其预定…
阅读更多...
图片编辑工具-Gimp

图片编辑工具-Gimp

一、前言 GIMP（GNU Image Manipulation Program）是一款免费开源的图像编辑软件，具有功能强大和跨平台的特性。 GIMP作为一个图像编辑器，它提供了广泛的图像处理功能，包括但不限于照片修饰、图像合成以及创建艺术作品…
阅读更多...
Day28：ElasticSearch入门、Spring整合ES、开发社区搜索功能

Day28：ElasticSearch入门、Spring整合ES、开发社区搜索功能

ElasticSearch入门 Elasticsearch简介 一个分布式的、Restful风格的搜索引擎。支持对各种类型的数据的检索（非结构化的也可以）。搜索速度快，可以提供实时的搜索服务。便于水平扩展（集群式部署），每秒可以处…
阅读更多...
练习项目后端代码解析注解篇（annotation）

练习项目后端代码解析注解篇（annotation）

前言 本来想从接口处入手的，但是一下看到接口里几十个方法，眼睛有点抗拒，想想还是先看作者写的自定义注解吧。 项目里有三个自定义注解： 分别是AccessLimit注解、OperationLogger注解、VisitLogger注解 AccessLimit注解 这是一…
阅读更多...
为什么下载卡在idealTree:NodeJS: sill idealTree buildDeps

为什么下载卡在idealTree:NodeJS: sill idealTree buildDeps

可能使用的是npm config set registry https://registry.npm.taobao.org而这个镜像文件已经过期了 解决方法如下： 先使用 npm cache clean --force 清除缓存 再切换镜像源 再使用npm config get registry 进行查看是否换源成功 再使用 npm install -g vue/cli 就…
阅读更多...
数据结构算法题day01

数据结构算法题day01

积累基本的写代码方式，其实都大同小异 王道、天勤、算法1800题、中选择 【day01】在带头节点的链表中，删除所有值为X的结点，并释放空间。 假设值为X的结点不唯一，试编写算法一实现上述操作。算法思路： a.首先找到x结点…
阅读更多...
加速乐 js解混淆 __jsl_clearance_s生成

加速乐 js解混淆 __jsl_clearance_s生成

提示！本文章仅供学习交流，严禁用于任何商业和非法用途，未经许可禁止转载，禁止任何修改后二次传播，如有侵权，可联系本文作者删除！ 目标网站 aHR0cHM6Ly9jcmVkaXQuaGVmZWkuZ292LmNuL2NyZWRpdC13…
阅读更多...
nginx 启动，查看，停止

nginx 启动，查看，停止

nginx 启动，查看，停止 启动 start nginx 查看是否启动成功 tasklist | findstr nginx 停止 nginx -s stop 测试配置文件的语法是否有误 nginx -t 重启nginx nginx-s reload
阅读更多...
分享天某云对象存储开发的体验

分享天某云对象存储开发的体验

最近体验了天某云对象存储的功能，作为一名资深开发者，开发体验差强人意，与阿里云存在一定的差距。 首先在开发文档上居然没有基于nodejs的代码示例，只有java,c#,go等的代码示例，虽然有javascript的，但那也只…
阅读更多...
面试经验分享 | 蓝队面试经验

面试经验分享 | 蓝队面试经验

关于蓝队面试经验 1.自我介绍能力 重要性 为什么将自我介绍能力放在第一位，实际上自我介绍才是面试中最重要的一点，因为护网面试并没有确定的题目，让面试官去提问 更多是的和面试官的一种 “交谈” ，面试的难易程度也自然就取决…
阅读更多...
Kubernetes 教程：在 Containerd 容器中使用 GPU

Kubernetes 教程：在 Containerd 容器中使用 GPU

原文链接：Kubernetes 教程：在 Containerd 容器中使用 GPU 云原生实验室本文介绍了如何在使用 Containerd 作为运行时的 Kubernetes 集群中使用 GPU 资源。https://fuckcloudnative.io/posts/add-nvidia-gpu-support-to-k8s-with-containerd/ 前两天闹得沸沸扬扬的事件不知道…
阅读更多...
C++ | Leetcode C++题解之第71题简化路径

C++ | Leetcode C++题解之第71题简化路径

题目&#xff1a; 题解&#xff1a; class Solution { public:string simplifyPath(string path) {auto split [](const string& s, char delim) -> vector<string> {vector<string> ans;string cur;for (char ch: s) {if (ch delim) {ans.push_back(mov…
阅读更多...
深度学习之基于YOLOv5目标检测可视化系统

深度学习之基于YOLOv5目标检测可视化系统

欢迎大家点赞、收藏、关注、评论啦 &#xff0c;由于篇幅有限&#xff0c;只展示了部分核心代码。 文章目录 一项目简介 二、功能三、系统四. 总结 一项目简介 一、项目背景与意义 随着深度学习技术的快速发展&#xff0c;目标检测在多个领域中的应用日益广泛&#xff0c;包括…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023