【MySQL】聊聊数据库高可用

news2024/11/27 22:25:12

对于任何一个互联网公司来说,必定涉及到存储系统,而一般主流的使用MySQL进行存储数据,但是如果只是部署一台数据库,数据丢失的话,其实没有办法进行有效的恢复,那么就会造成一定的损失。要么就是直接的损失,比如针对对账、支付系统,一旦数据金额不对,那么影响非常大。另一种是由于数据系统出现故障,导致业务受到影响。

在分布式系统中,为了实现数据的高可用,一般的方式就是采用数据复制、分片。说白了就是将一份数据同时存储多份,副本可以提供读写功能,或者只提供备份功能。

数据备份和恢复

全量备份

全量备份其实就是将从数据开始存储到现在时间点 全部数据进行备份。然后出现数据问题的时候,在执行全量备份的SQL文件。
mysql提供的 mysqldump 就是执行全量备份的。
我使用的是8.0 一直执行报错。

mysqldump -uroot -prootroot --all-databases > /tmp/all.sql

全量备份虽然可以保存某一时刻之前的所有数据,但是由于保存的是全部的数据,所以进行恢复的时候,对于数据库服务器的CPU、IO都会占用比较高。并且之后新增加的数据无法进行恢复。所以需要增量备份。

增量备份

增量备份其实就是试试备份,使用的就是bin log文件。mysql的每次更新数据操作,都会记录到Binlog中。并且binlog可以进行回放的。

show VARIABLES like '%log_bin%';

在这里插入图片描述
可以看到默认是开启binlog的。还有对应binlog的存储地址,索引位置。

show master status;

显示正在写入的binlog文件,当前位置。
在这里插入图片描述
所以配合使用全量+增量备份,可以保证数据即使丢失,也可以进行恢复。

  • 不要把数据都只存储在一个服务器上。
  • 回放binlog文件,时间点稍微提前一点。

配置MySQL HA实现高可用

上述虽然使用全量和增量的备份方式,但是当出现数据故障的时候,如果在去进行数据恢复,这个时间是不可预估的。所以更好的方式是同时启用备用库,实时同步主库的binlog文件。一旦主库宕机,立马切到备用库。这就是MySQL的HA方案。

更新数据流程

  • 主库进行更新数据然后写入bin log
  • 主库更新存储引擎中的数据
  • 返回客户端成功响应
  • 主库把binlog复制从库
  • 从库回放binlog,更新存储引擎中数据。

正常情况下,主从之间的延迟大概在毫秒级别,但是当出现主从之间数据延迟过高的时候,从库就获取不到最新的数据。并且一般数据库都是先繁忙,然后性能下降,最终宕机。这种情况下,如果我们直接切换从库,那么从库的数据就可能丢失部分数据。并且后续没有办法进行恢复,因为数据是冲突的。

所以在主库宕机并且主从有延时的情况下,是切换到从库继续提供服务,还是为了保证数据一致性,不切,是一个权衡。
也就是数据一致性和可用性之前权衡,则中的方式也有,但是需要主库写完从库之后,在返回客户端成功写入数据。如果一个从库的话,可能回阻塞。所以一般就是采用2台从库,一台主库。

在这里插入图片描述

小结

本篇主要介绍了数据恢复,全量和增量复制,高可用依靠的就是数据复制,数据复制其实就是将数据从一台复制到另一台。而在复制的过程中,选择同步复制、还是异步复制。等都需要结合业务进行选择。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/992595.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

pc端字体为什么到12像素以后不生效

pc端字体为什么到12像素以后不生效&#xff1f; 因为谷歌浏览器默认的最小字体是12像素&#xff0c;如果去‘设置’里面修改最小字体&#xff0c;是可以达到修改效果的&#xff0c;但是&#xff0c;你不能解决用户的浏览器设置 解决办法如下 <p class"font">…

SG-Former:具有进化Token重新分配的自引导Transformer

摘要 https://arxiv.org/pdf/2308.12216.pdf Vision Transformer在各种视觉任务中展示了令人印象深刻的成功。然而&#xff0c;其沉重的计算成本相对于Token序列长度呈二次增长&#xff0c;在很大程度上限制了其处理大型特征映射的能力。为了降低计算成本&#xff0c;以往的研…

华为云云耀云服务器L实例评测|服务器实例基础使用实践

&#x1f996;我是Sam9029&#xff0c;一个前端 Sam9029的CSDN博客主页:Sam9029的博客_CSDN博客-JS学习,CSS学习,Vue-2领域博主 **&#x1f431;‍&#x1f409;&#x1f431;‍&#x1f409;恭喜你&#xff0c;若此文你认为写的不错&#xff0c;不要吝啬你的赞扬&#xff0c;求…

常见的图像格式介绍:RAW、RGB、YUV

常见的图像格式有RAW、RGB、YUV这三大类 1. RAW raw图像指的是sensor输出的原始数据&#xff0c;常见的有8位、10位、12位之分&#xff0c;分别表示一个像素点所占的字节数为8bit、10bit、12bit。 raw数据常见的有四种Bayer模式&#xff1a;GRBG、RGGB、BGGR&#xff08;下图…

苹果计划2024年AirPods引入新接口,后续升级体温测量、听力测试

据彭博社马克・古尔曼&#xff08;Mark Gurman&#xff09;报道&#xff0c;苹果公司计划在最早2024年为其旗舰无线耳机AirPods和AirPods Max引入USB-C端口&#xff0c;并试图将其所有基于Lightning接口的配件改用USB-C接口。 据古尔曼表示&#xff0c;AirPods Pro将率先改用新…

学校ROS培训项目记录

项目内容&#xff1a; 在linux上安装ROS&#xff08;可以使用虚拟机&#xff09;编写ROS程序&#xff0c;实现话题的订阅和发布基于松灵小车硬件&#xff0c;显示雷达数据、图像数据移动松灵小车&#xff0c;绘制小车的运动轨迹 实现过程记录 1.ubuntu22.04上安装ros2 ubun…

Cookie、Session、Token、JWT

文章目录 1. 认证(Authentication) & 授权(Authorization) & 凭证(Credentials)1.1 认证(Authentication)1.2 授权(Authorization)1.3 凭证(Credentials) 2. Cookie & Session2.1 什么是 Cookiecookie 重要的属性 2.2 什么是 Session2.3 Cookie 和 Session 的区别 …

来看看Python编码规范(PEP 8)

在讲解具体的​ Python 编 ​码规范之前&#xff0c;先来看看图 1 中的代码&#xff1a; 图 1 两段功能相同的 Python 代码 对比图 1 中的两段代码你会发现&#xff0c;它们所包含的代码时完全相同的&#xff0c;但很明显&#xff0c;右侧的代码编写格式看上去比左侧的代码段更…

VR桥梁应用:实现可视化的桥梁监控

在过去的几年中&#xff0c;虚拟现实(VR)技术已经在多个领域得到了广泛的应用。其中&#xff0c;桥梁巡检是一个特别有前景的应用领域。利用VR技术&#xff0c;我们可以创建一个安全、高效的桥梁巡检方式&#xff0c;帮助工程师和维护人员更好地理解和评估桥梁的状态。 通过VR设…

Mac电脑使用万能头文件教程(详细)

参考:https://blog.csdn.net/weixin_46522531/article/details/126292477 预计阅读操作时间&#xff1a;5分钟 Mac电脑由于使用的是苹果自己的编译器&#xff0c;很多头文件不支持&#xff0c;像万能头就是其中的一员。万能头可以为我们节省很多时间&#xff0c;减少很多不必要…

企业架构LNMP学习笔记28

企业架构LNMP高可用负载均衡服务器之Nginx&#xff1a; 1&#xff09;能够描述负载均衡的作用&#xff1b;loadbalance LB。 2&#xff09;能够了解负载均衡常见的实现方式&#xff1b; 3&#xff09;能够使用nginx实现负载均衡&#xff1b; 4&#xff09;能够描述nginx的常…

OpenCV DNN神经网络部署流程

&#x1f482; 个人主页:风间琉璃&#x1f91f; 版权: 本文由【风间琉璃】原创、在CSDN首发、需要转载请联系博主&#x1f4ac; 如果文章对你有帮助、欢迎关注、点赞、收藏(一键三连)和订阅专栏哦 目录 前言 一、加载网络模型 二、构建输入 三、执行推理 四、解析输出 前言…

公开游戏、基于有向图的游戏

目录 〇&#xff0c;背景 一&#xff0c;公开游戏、策梅洛定理 1&#xff0c;公开游戏 2&#xff0c;策梅洛定理 二&#xff0c;有向图游戏 1&#xff0c;狭义有向图游戏 2&#xff0c;广义有向图游戏 3&#xff0c;狭义有向图游戏的SG数 4&#xff0c;Bash Game 力扣…

【List篇】使用Arrays.asList生成的List集合,操作add方法报错

早上到公司&#xff0c;刚到工位&#xff0c;测试同事就跑来说"功能不行了&#xff0c;报服务器异常了&#xff0c;咋回事";我一脸蒙&#xff0c;早饭都顾不上吃&#xff0c;要来了测试账号复现了一下&#xff0c;然后仔细观察测试服务器日志&#xff0c;发现报了一个…

【C语言】错题本(3)

题目: 为了方便分析,我们将题目代码贴在下面: int main() {unsigned char puc[4];struct tagPIM{unsigned char ucPim1;unsigned char ucData0 : 1;unsigned char ucData1 : 2;unsigned char ucData2 : 3;}*pstPimData;pstPimData (struct tagPIM*)puc;memset(puc,0,4);pstPi…

【计算机网络】HTTP(上)

文章目录 1.HTTP概念2. URLurlencode 和 urldecode转义规则 3. HTTP的宏观理解HTTP的请求HTTP的响应 4. 见一见HTTP请求和响应请求报头 1. 模拟一个简单的响应response响应报头 2. 从路径中获取内容ReadFile函数的实现 3.不同资源进行区分反序列化的实现ReadOneLine函数的实现P…

VUE3+JAVA商城源码小程序APP商城

三勾小程序商城基于springbootelement-uiuniapp打造的面向开发的小程序商城&#xff0c;方便二次开发或直接使用&#xff0c;可发布到多端&#xff0c;包括微信小程序、微信公众号、QQ小程序、支付宝小程序、字节跳动小程序、百度小程序、android端、ios端。 软件架构 后端&a…

多维时序 | MATLAB实现GWO-LSTM灰狼算法优化长短期记忆神经网络的多变量时间序列预测

多维时序 | MATLAB实现GWO-LSTM灰狼算法优化长短期记忆神经网络的多变量时间序列预测 目录 多维时序 | MATLAB实现GWO-LSTM灰狼算法优化长短期记忆神经网络的多变量时间序列预测预测效果基本介绍程序设计参考资料 预测效果 基本介绍 MATLAB实现GWO-LSTM灰狼算法优化长短期记忆神…

深圳企业制作宣传片群体定位的重要性

相信众多企业都拍了自己公司的宣传片&#xff0c;尤其是在互联网高度发达的今天&#xff0c;宣传片可以说成为了我们企业对外宣传最主要的方式。看着企业多样式的宣传片种类&#xff0c;我们该如何评价一部宣传片的好坏呢&#xff1f;要知道宣传片的好坏是一个相对主观的问题&a…

Python多进程共享变量实现方法

前言 大家早好、午好、晚好吖 ❤ ~欢迎光临本文章 话不多说&#xff0c;直接开搞&#xff0c;如果有什么疑惑/资料需要的可以点击文章末尾名片领取源码 一、错误的实现方式 最初以为是没添加global声明导致修改未生效&#xff0c;但实际操作发现global方式在多进程中也只能读…