主从备份(复制)

news2024/11/13 6:40:31

一、备份的三种类型

备份的三种主要类型包括热备份、逻辑备份和物理备份,每种备份类型都有其特定的应用场景和优缺点。

1. 热备份

定义
热备份是在数据库或系统处于正常运行状态下进行的备份。这种备份方式允许在不停机的情况下对数据库或系统数据进行保护,减少了备份操作对业务连续性的影响。

特点

  • 在线性:在数据库或系统正常运行时进行,无需停机。
  • 数据一致性:需要确保在备份过程中数据的一致性,通常通过数据库的事务日志或日志链来实现。
  • 资源占用:可能会占用较多的系统资源,如CPU、内存和I/O资源。
  • 恢复能力:在发生故障时,可以利用热备份快速恢复数据,减少业务中断时间。

适用场景

  • 需要高可用性和业务连续性的场景。
  • 数据库或系统无法承受长时间停机进行备份的情况。

2. 逻辑备份

定义
逻辑备份是通过导出数据库的逻辑结构和数据内容来进行备份的方法。它通常涉及对数据库中的表、视图、存储过程等逻辑对象进行备份。

特点

  • 数据独立性:逻辑备份与数据库的物理存储结构无关,可以在不同的数据库管理系统之间进行迁移。
  • 灵活性:可以选择性地备份和恢复特定的逻辑对象,如单个表或视图。
  • 可读性:备份文件通常是文本格式,易于查看和编辑。
  • 备份和恢复时间:备份和恢复过程可能相对较慢,因为需要遍历数据库的逻辑结构并生成或重建逻辑对象。

适用场景

  • 需要进行数据库迁移或版本升级的场景。
  • 需要对部分数据进行备份和恢复的场景。

3. 物理备份

定义
物理备份是直接复制数据库的物理文件(如数据文件、日志文件等)来进行备份的方法。它保留了数据库的物理存储结构和数据内容。

特点

  • 高效性:备份和恢复过程通常较快,因为直接操作物理文件。
  • 数据一致性:物理备份可以确保备份文件与原始数据库之间的高度一致性。
  • 空间占用:可能占用较多的存储空间,特别是进行完整备份时。
  • 恢复能力:在发生故障时,可以利用物理备份快速恢复整个数据库或特定的数据文件。

适用场景

  • 需要快速恢复整个数据库的场景。
  • 数据库规模较大,且对备份和恢复时间有较高要求的场景。

综上所述,热备份、逻辑备份和物理备份各有其特点和适用场景。在实际应用中,可以根据具体需求和业务连续性要求选择合适的备份类型或组合使用多种备份类型来确保数据的安全性和可恢复性。

二、情景

1、⼊职企业,发现企业架构为⼀主多从,但是两台从服务器和主库不同
步,但是每天会全库北⽅主服务器上的数据到从服务器,由于数据量
不是很⼤,所以没有⼈处理主从不同步的问题
2、技术
熟悉 mysql 数据库常⻅主从架构
理解 mysql 主从架构实现原理
掌握 mysql 主从架构的搭建
3、业务场景
企业对数据安全性越来越重视,由于常规备份不能实时记录
数据库的所有状态,为了能够保障数据库实时备份冗余,希
望将现有的单机数据库变成双机热备
4、目标
了解什么 mysql replication
理解 mysql replication 的架构原理
掌握 mysql 基本复制架构 m-s
了解和掌握基于 GTID 复制特点以及搭建
三、集群概述
1. 集群主要类型
1. ⾼可⽤集群 High Avaible Cluster HA cluster
2. ⾼可⽤集群是指通过特殊软件,把独⽴的服务器连接起来,
组成⼀个能够提供故障切换( Fail Over )功能的集群
2. ⾼可⽤标准
3. 常⽤的集群架构
1. mysql replication
2. mysql cluster
3. mysql group replication MGR
4. Maradb Galera CLuster
5. MHA|keepalived|HeatBeat|Lvs Haproxy 等技术构建⾼可⽤
集群
4.
复制原理
1. replication, 可以实现将数据从⼀台数据库服务器( mster )复制
到多台数据库服务器 slave
2. 默认情况下, replication 属于异步复制,所以⽆需⻓连接 3. ⼯作原理
1. master 主服务器
2. slave 从服务器
3. 描述
1. slave 端的 io 线程发送请求给 master 端的 binlog dump 线
2. master 端的 binlog dump 线程获取⼆进制⽇志信息(⽂
件名和位置信息)发送给 slave 端的 io 线程
3. slave 端的 io 线程获取到内容,依次写到 slave relay log
(中继⽇志)并把 master 端的 binlog ⽂件名和位置记录
master info ⾥头,
4. slave 端的 sql 线程检测到 relaylog 中的内容更新,就会解
relaylog 中的更新内容,并执⾏这些操作,从⽽达到和
master 端数据⼀致
4.
复制架构体系 复制架构体系
1. 解决单点故障
2. 承担更多的读的压⼒
3. 从服务器都从主服务器读取数据, master 服务器压⼒⼤
1. 看起来可以同时接收读写,实际运作中只有⼀台服务器在⼯
作,另外⼀台只接受读
5. 1.
安装前的环境准备 安装前的环境准备
1. 普通的 ab 复制,最基本的架构 M-S
2. 两者数据库的的版本必须⼀致
4. 前期准备,克隆机器,设置 ip ,修改主机名称,关闭
NEtworkManager ,防⽕墙 selinux ,配置 yum 源,配置时间同步
时间同步是⾮常重要的设置
ntpdate cn.ntp.org.cn
主从复制核⼼思路
1. 思路
1. slave master 必须安装相同的 msyql 版本
# master 服务器中添加
sed -i '$a192.168.137.80
master.msyql.yuanyu.zhangmin' /etc/hosts
# slave 服务器中添加
sed -i '$a192.168.137.90
slave.msyql.yuanyu.zhangmin' /etc/hosts
ntpdate cn.ntp.org.cn 2. master 开启⼆进制⽇志, slave 必须开始 relay ⽇志
3. mster 端和 slava 端的 server-id 不能⼀致
4. se
1. master 必须创建⼀个复制⽤户
2. 保持 master slave 端初始数据⼀致
3. slave 端配置主从复制
2. 思路
1. 思路
主从复制之 master 配置
1. 编写 mysql 安装脚本
##
1. 上传 mysql 安装包到 mstaer slave
2. 编写脚本
#!/bin/bash
yum list installed |grep libaio
if [ $? ne 0 ]; then
yum -y install libaio
fi
echo libaio yes
rm -rf /etc/my.cnf echo remo my.cnf yes
tar -xf mysql-8.0.33-linux-glibc2.12-
x86_64.tar.xz
echo tar zx yes
cp -r ~/mysql-8.0.33-linux-glibc2.12-x86_64
/usr/local/mysql
echo copy file to /usr/local/mysql yes
mkdir /usr/local/mysql/mysql-files
echo mysql-files yes
grep mysql /etc/passwd
useradd -r -s /sbin/nologin mysql
chown mysql:mysql /usr/local/mysql/mysql-files
chmod 750 /usr/local/mysql/mysql-files
/usr/local/mysql/bin/mysqld --initialize --
user =mysql --basedir =/usr/local/mysql/
/usr/local/mysql/bin/mysql_ssl_rsa_setup --
datadir =/usr/local/mysql/data cp /usr/local/mysql/support-files/mysql.server
/etc/init.d/mysql8
sed -i '$aexport
PATH=/usr/local/mysql/bin:$PATH' /etc/profile
source /etc/profile
3. 编写配置⽂件
vim /usr/local/mysql/my.cnf
4. 重启服务
5. 设置开机启动
[root@mysql001 ~]# chkconfig --add
mysql8
[root@mysql001 ~]# chkconfig mysql8 on
[root@mysql001 ~]# chkconfig
注:该输出结果只显示 SysV 服务,并不包含
原⽣ systemd 服务。 SysV 配置数据
可能被原⽣ systemd 配置覆盖。
要列出 systemd 服务,请执⾏
'systemctl list-unit-files'
查看在具体 target 启⽤的服务请执⾏
'systemctl list-dependencies
[target]'
mysql8 0: 1: 2: 3: 4:
5: 6: 主从复制之 slave 从服务器软件的安装
1. 不需要初始化
2. 查看⽂件
3. 脚本
netconsole 0: 1: 2: 3: 4:
5: 6:
network 0: 1: 2: 3: 4:
5: 6:
相对于主服务器的安装与配置,从服务器不需要初始化,他的数
据都来⾃于主服务器,其他都⼀样
[root@slave ~] # ls
anaconda-ks.cfg mysql-8.0.33-linux-glibc2.12-
x86_64.tar.xz
initserver.sh mysql.sh
vim mysql.sh
#!/bin/bash
4. 配置⽂件
主从复制之数据同步
1. master 服务器同步到 slave 服务器
1. 停⽤ master 服务器 msyql 服务
service mysql8 stop 2. master 删除 /usr/local/mysql/data/auto.cnf 每安装⼀个
mysql 软件, data 数据⽬录都会产⽣⼀个 auto.cnf ⽂件,⾥⾯
是⼀个唯⼀性编号,相当于每个⼈的身份证编号
[root@mysql001 ~] # ls
/usr/local/mysql/data/auto.cnf
/usr/local/mysql/data/auto.cnf
[root@mysql001 ~] # cat
/usr/local/mysql/data/auto.cnf
[auto]
server-uuid =f6421989-5330-11ef-974f-
000c29ce78bb
[root@mysql001 ~] # rm -rf
/usr/local/mysql/data/auto.cnf
3. master slave 都安装 rsync
yum -y install rsync
4. 同步 master 中的 data slave 对应位置
rsync -av /usr/local/mysql/data
root@10.1.1.110:/usr/local/mysql/
5. 启动主服务器和从服务器 [root@mysql001 ~]# service mysql8 start
Starting MySQL.. SUCCESS!
[root@slave ~]# service mysql8 start
Starting MySQL.Logging to
'/usr/local/mysql/data/db01-slave.err'.
. SUCCESS!
6. 登录从服务器
[root@mysql001 ~] #
/usr/local/mysql/bin/mysql -P3310 -
pZhang_Min_666
mysql: [Warning] Using a password on the
command line interface can be insecure.
Welcome to the MySQL monitor. Commands end
with ; or \g.
Your MySQL connection id is 8
Server version: 8 .0.33 MySQL Community
Server - GPL
Copyright (c) 2000 , 2023 , Oracle and/or its
affiliates. ⽆法启动的⼏种情况
1. /etc/init.d/mysql8 不存在,可能没有复制
2. mysql 没有安装在 /usr/local/mysql
3. my.cnf 导致⽆法启动,格式
1. 安装路径
2. 数据⽬录
3. 套接字
4. 错误⽇志到底放在 data ⾥头
5. mysql 账户⽆法写⼊ /usr/local/mysql/
6. 将错误⽇志放在 data 就没有权限⽂件
7. 直接修改 /usr/local/mysql 的权限
Oracle is a registered trademark of Oracle
Corporation and/or its
affiliates. Other names may be trademarks of
their respective
owners.
Type 'help;' or '\h' for help. Type '\c' to
clear the current input statement.
主从复制的实现
1. master 创建授权账号
2. master 中锁表,然后查看⼆进制⽂件和位置
3. 在从服务器中,使⽤ change master to 指定主服务器,并实现数
据同步
[ root @slave ~ ] # /usr/local/mysql/bin/mysql -
P3310 -pZhang_Min_666
mysql: [ Warning ] Using a password on the
command line interface can be insecure.
Welcome to the MySQL monitor. Commands end
with ; or \g .
Your MySQL connection id is 8
Server version: 8.0.33 MySQL Community Server -
GPL Copyright ( c ) 2000 , 2023 , Oracle and /or its
affiliates.
Oracle is a registered trademark of Oracle
Corporation and /or its
affiliates. Other names may be trademarks of
their respective
owners.
Type 'help;' or '\h' for help . Type '\c' to
clear the current input statement.
4. 启动 slave 数据同步,查看状态
mysql> start slave
mysql> show slave status \G
5. 常⻅⽂件 1. change-master-to 写错
6. 解锁⽂件
8.0 需要 ssl ⾮对称加密
1. 获得远程 master 主机的公钥
mysql -uzhangmin -pabc_123 -h 192.168.71.166 -
P3306 --get-server-public-key
quit
2. 登录 slave 服务器本地的数据库
stop slave
reset slave
change master to ...
mysql> unlock tables ;
Query OK, 0 rows affected ( 0.00 sec )
3. 停⽤ slave 服务,重新设置 slave 服务
mysql> stop slave;
mysql> reset slave;
mysql> change master to
master_host='192.168.71.166',
master_user='zhangmin',
master_password='abc_123', master_port=3306,
master_log_file='binlog.000006',master_log_pos=
866;
4. 启动 slave 服务
mysql> start slave
mysql> show slave status\G

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1986918.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

用Python构建一个简单的神经网络

准备工作 首先我们需要使用到vscode 在终端 窗口下输入安装:pip3 install tensorflow pandas numpy keras 代码编写 导入库 import tensorflow as tf from tensorflow.keras.models import Sequential from tensorflow.keras.layers import Dense import panda…

PyTorch深度学习实战(3)—— 小试牛刀:CIFAR-10分类

下面尝试从零搭建一个PyTorch模型来完成CIFAR-10数据集上的图像分类任务,步骤如下。 (1)使用torchvision加载并预处理CIFAR-10数据集。 (2)定义网络。 (3)定义损失函数和优化器。 (4…

面向服务架构(SOA)介绍

在汽车电子电气架构还处于分布式时代时,汽车软件的开发方式主要是采用嵌入式软件进行开发,而随着汽车智能化程度的加深,更加复杂且多样的功能需求让汽车软件在复杂度上再上一层。在整车的自动驾驶方面,由于未来高阶自动驾驶能力的…

JavaScript constructor原型原型继承

constructor 在 JavaScript 中,构造函数是一种特殊的函数,使用 new 关键字来调用,用于创建对象实例。JavaScript 中的构造函数通常通过 function 关键字定义。 例如: function Person(name, age) {this.name name;this.age a…

C语言预处理:开启编程新境界

✨✨ 欢迎大家来到贝蒂大讲堂✨✨ 🎈🎈养成好习惯,先赞后看哦~🎈🎈 所属专栏:C语言学习 贝蒂的主页:Betty‘s blog 1. 预处理符号 在C语言中,我们可以通过一些预定义符号查看文件的…

vue中post请求返回二进制流文件下载

1 .调用接口返回的如下图所示,此时看到是一个流文件 2.不管是get请求还是post请求都需要加上 下面这行代码 responseType: "blob", 3.我们自行二次封装的axios可能会导致乱码现象,建议直接用axios调用接口请求 4.关于Excel导出 POI 响应头设置 Content-Type: applica…

Tomcat高可用集群(实例详解)

一.环境准备 虚拟机的版本:VMware-workstation-full-15.5.6-16341506.exe系统镜像版本:CentOS-6.10-x86_64-bin-DVD1.iso,全新安装,桌面版,可上网系统内存大小:1GB系统硬盘大小:20GB连接工具版…

《决胜B端 产品经理升级之路》 知识点总结

什么是b端产品? b端产品是指面向企业或组织的经营管理问题,旨在解决企业规模、成本、效率、品质和风控等方面的产品。这些产品主要帮助企业提高运营效率、降低成本、改善品质和控制风险等。b端产品适用于各种行业和企业类型,可以为企业带来深…

WordPress原创插件:disable-gutenberg禁用古腾堡编辑器和小工具

WordPress原创插件:disable-gutenberg禁用古腾堡编辑器和小工具 disable-gutenberg插件下载:https://download.csdn.net/download/huayula/89616495

【zlm】针对单个设备的音频的编码的设置

目录 结论 原理 测试 结论 为了防止zlm音频配置里设置成opus优先,在国标推流时,调用push时,默认加上codecpcma 如下 https://10.60.100.196:10443/index/api/webrtc?applive&streamtest&typepush&codecpcma 原理 测试 …

ASP.Net Core设置接口根路径的方法

使用asp.net core开发微服务项目,需要给每个服务设置不同的根路径,这样既能使用网关转发请求,又方便对单个服务进行测试,保证请求路径的统一。 设置方法需要使用中间件,在Program.cs添加如下代码 app.UsePathBase(&qu…

量化投资基础(四)之AR、MA、ARMA与ARIMA模型

点赞、关注,养成良好习惯 Life is short, U need Python 量化投资基础系列,不断更新中 1 引言 时间序列经典模型主要有: 自回归模型(Auto Regressive,AR)移动回归模型(Moving Average,MA&…

无线领夹麦克风哪个品牌好,哪款领夹式麦克风性价比高

随着自媒体行业的蓬勃发展,内容创作者对高质量音频设备的需求日益增长。无线领夹麦克风,凭借其便携性、高音质与灵活性,正逐渐成为视频制作、直播互动及日常Vlog记录的标配工具。其兴起不仅反映了创作者对专业录音品质的追求,也体…

Web安全学习

1 计算机网络与协议 1.1 网络基础 1.1.1 计算机通信网的组成 计算机网络由通信子网和资源子网组成。 通信子网:负责数据的无差错和有序传递,其处理功能包括差错控制、流量控制、路由选择、网络互连等。 资源子网:是计算机通信的本地系统环境…

全球油价与棕榈油市场波动

一、油价暴跌与经济衰退担忧 周一(8月5日)欧盘时段,油价暴跌,两大主要基准油价均下跌逾2%,触及八个月低点。油价的急剧下跌主要是由于人们担心全球最大的石油消费国美国可能陷入衰退。全球疲弱的经济数据加剧了人们对燃…

绿色精益生产新潮流:环保也能成为竞争力!

在当今这个快速变化且竞争激烈的市场环境中,企业面临着前所未有的挑战。为了保持竞争力并实现可持续发展,企业必须不断探索和采用更高效、更灵活的生产管理方式。精益生产,作为一种源自日本丰田汽车公司的生产哲学,凭借其消除浪费…

Animate软件基本概念:组和文本

这里继续介绍Animate软件中的基本概念,组和文本两个概念。 FlashASer:AdobeAnimate2021软件零基础入门教程https://zhuanlan.zhihu.com/p/633230084 FlashASer:实用的各种Adobe Animate软件教程https://zhuanlan.zhihu.com/p/675680471 Fl…

Go - 10. * 值类型和指针类型的差异

目录 一.引言 二.接收者类型 三.代码示例 1.指针接收者 2.值接收者 3.运行结果对比 4.代码修改 5.刨根问底 四.总结 一.引言 go 语言中 func (c *Title) 和 func (c Title) 两个方法的传参差一个 * 号,二者的区别是一个是指针类型,一个是值类型…

scratch水仙花数 2024年6月scratch四级 中国电子学会图形化编程 少儿编程等级考试四级真题和答案解析

目录 scratch水仙花数 一、题目要求 1、准备工作 2、功能实现 二、案例分析 1、角色分析 2、背景分析 3、前期准备 三、解题思路 1、思路分析 2、详细过程 四、程序编写 五、考点分析 六、推荐资料 1、入门基础 2、蓝桥杯比赛 3、考级资料 4、视频课程 5、p…

深度学习入门(一):感知机与输入数据

单层感知机与多层感知机 单层感知机(Single-Layer Perceptron)和多层感知机(Multi-Layer Perceptron,简称MLP)是神经网络的基本形式,用于执行各种机器学习任务,包括分类和回归。它们都基于早期…