Mysql之高可用方案浅析

news2024/11/28 6:53:09

在工程项目中,系统应用的高可用性越来越重要,业主越来越重视。其实高可用可以分为应用层高可用和数据层高可用,数据层高可用中常见的有关系型数据库mysql的高可用、非关系型NoSQl数据库redis的高可用等,下面聊聊典型的关系型数据库mysql的高可用方案。

1、单中心双机

单中心双机的常见方案如下:

  • 一主一备架构(主备)
  • 一主一从架构(主从)
  • 互为主从架构(双主)

1.1、一主一备

一主一备架构是双机部署中最简单的一种架构了,mysql数据库系统自带这个数据同步(主备)功能。
思路:将mysql数据库部署到两台机器,其中一台机器作为日常线上提供数据读写服务的机器,称为主机;另一台机器不提供线上服务,但会实时将主机的数据同步过来,称为备机。一旦主机出现了故障,通过人工的方式,手动将主机下线,将备机改为主机来继续提供服务。
优点:不需要做什么开发改造。
缺点:当主机出现故障的时候,需要人工去干预;还有就是需要一台备机长期备着,单又不提供线上服务,浪费资源。

1.2、一主一从

为了解决资源浪费的问题,出现了一主一从架构。
思路:一主一从架构与一主一备架构一样。区别就是一主一备的备机不提供线上服务,主要起到备份作用;而一主一从的备机改为了从机,也提供线上服务,但是只提供读服务,不提供写服务。
优点:相对一主一备架构,节约了资源,从机也在线提供读服务。当主机出现故障的时候,在人工介入之前,从机依旧可以提供读服务,可用性又提高了一个层次。
缺点:架构稍微复杂了一点,业务系统需要用一定的策略去判断该路由到那一台去读取数据,且数据同步会有延迟,去从机读取数据也可能会有延迟;还有就是并没有解决人工干预的问题,当主机出现了故障后还需要人工去处理。
若想让架构更智能一旦,需要引入一主一从自动切换功能,当主机出现故障后,从机能够自己检测发现,并自己将自己切换为主机,将原来的主机下线或转换为从机,即数据同步方向变了,但复杂度和成本加剧,不好实现。

1.3、互为主从

互为主从架构是指两台机器自己都是主机,并且也都是对方的从机,两台机器都提高完整的读写服务,无需切换。当应用系统在调用的时候随机挑选一台即可,当其中一台宕机了,另一台还可以继续服务。
思路:两台机器互为主从,都接受写数据,并将数据实时同步给对方,需要将数据进行两台机器的双向复制。通过VIP对外提供唯一一个服务地址,如通过keepalived组件实现ip漂移,当绑定的机器宕机了,漂移到另一台机器继续提供服务。
优点:解决了人工干预的问题,可用性得到进一步提高。
缺点:架构复杂度加剧,不可避免会有一定程度的数据延迟,极端情况下甚至会有数据丢失问题。

2、多机

常见的多机方案如下:

  • 单中心数据集群
  • 多中心数据分区

2.1、单中心数据集群

单数据中心多机器集群又分为:

  • 数据集中模式(一主多从);
  • 数据分散模式;

这两种的主要区别在于集群中的完整业务数据是全部集中在一台机器上,但是分散在多台机器上。

数据集中模式

这种模式与一主一从架构类似,完整的业务数据还是存储在一台主机上,主机承担读服务和写服务,从机只承担读服务。但是从机有多台机器,从机实时的从主机同步数据,称为一主多从模式。
因为有多个从机,带来了一些额外需要处理问题,比如:

  • 主机需要实时的将数据同步到多台从机上,涉及到主机的处理压力问题。
  • 需要保障多台从机之间的数据一致性的问题,如果出现数据不一致,如何处理。
  • 多台从机是如何检测主机状态的,因为从机在关键时刻是要替换主机的,那么如果多台从机监测到的主机状态不一致,那又可能会带来其它问题。
  • 从机切换为主机的时候,选择哪一台从机来切换呢,这涉及到多台从机之间如何进行选举的问题。

由于数据集中模式的所有写操作都只到一台主机上,而读操作可以到N台从机上。因此这种模式比较适用于业务数据量不大、读操作远远大于写操作、集群规模较小的业务场景。

数据分散模式

数据分散模式是指,完整的业务数据并非是全部存储在一台主机上的,而是由多台主机共同分担,分散存储。
使用这种模式,也有几点需要特别注意的:

  • 尽量将数据均衡的分散的各个机上,这样才能保证资源的均衡使用和性能的最佳。
  • 多台机器上的数据虽然不同,但是也需要互相进行数据的备份。
  • 要能动态的增加和删除节点,这样可以便于随时扩展,通常采用一致性HASH的方法。

这种模式适用于大数据量、集群规模较大的场景。

2.2、多中心数据分区

出于容灾的考虑,通常会在多个不同地区部署多套的数据集群。毕竟在国内运营商网络故障、光纤被铲断等事件还是不少的。轻则一个机房出问题,重则一个城市一个省份都可能故障。
多中心的数据分区架构,将数据按照一定的规则进行分区,部署在不同机房/城市里,且每一个分区都存储一部分数据,通过这种方式来保障数据和服务的可用性。
这种架构中需要考虑分区规则和备份规则,复杂度加剧,详细方案请参考大佬博客。

3、mysql双主+keepalived实现双机热备高可用

双主+keepalived是非常典型的mysql高可用方案,架构示意如下:
在这里插入图片描述
在主实例的keepalived中,增加检测本机mysql是否存活的脚本,如果检测mysql宕了,就会重启keepalived,从而使VIP漂移到从实例。

优点:部署简单,只有两个节点,没有主实例宕机后选主的问题;业务应用不需要开发改造。
缺点:云环境使用不了。
具体可以参考《浅入浅出keepalived+mysql实现高可用双机热备》博客。
该高可用方案也可以扩展到一主多从的场景,保证多从机器从主机器实时同步数据,利用keepalived等第三方软件同时使用,即可以用来监控数据库的健康,又可以执行一系列管理命令,如果主库发生故障,切换到备库后仍然可以继续使用数据库。

4、小结

mysql的高可用还有其他解决方案,如下:

  • MHA(Master High Avaliable) 是一款 MySQL 开源高可用程序,MHA 在监测到主实例无响应后,可以自动将同步最靠前的 Slave 提升为 Master,然后将其他所有的 Slave 重新指向新的 Master。MHA Manager会定时探测集群中的master节点,当master出现故障时,它可以自动将最新数据的slave提升为新的master,然后将所有其他的slave重新指向新的master,整个故障转移过程对应用程序完全透明。
  • PXC(Percona XtraDB Cluster)是一个完全开源的 MySQL 高可用解决方案。它将 Percona Server、Percona XtraBackup 与 Galera 库集成在一起,以实现多主复制的 MySQL 集群。任何节点宕机,集群都可以继续运行而不会丢失任何数据。

具体那种方案还需要考虑具体的应用场景,如当工程应用采用云平台时,平台也会提供mysql的高可用能力,如mysql容器化部署,且具有副本机制、节点宕了后快速拉起机制,也提供了mysql的高可用性。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/576967.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

2023 剑桥大学博士后/访问学者项目一览

作为全球知名的高等教育机构,剑桥大学一直致力于与世界各地的学者保持紧密联系,共同探索各个学科领域的前沿问题和挑战。为了加强国际间的学术交流和合作,剑桥大学开展了博士后访问学者项目,为来自不同国家和地区的优秀学者提供机…

【Python pyqt】零基础也能轻松掌握的学习路线与参考资料

。 Python和pyqt是一对非常强大的组合,可以用于快速开发各种应用程序,包括桌面应用程序、Web应用程序、游戏等等。如果想要系统地了解如何学习Python pyqt,可以遵循以下学习路线: Python基础知识学习 在学习pyqt之前&#xff0c…

机器学习_数据升维_多项式回归代码_保险案例数据说明_补充_均匀分布_标准正太分布---人工智能工作笔记0038

然后我们再来看一下官网注意上面这个旧的,现在2023-05-26 17:26:31..我去看了新的官网, scikit-learn已经添加了很多新功能, 我们说polynomial多项式回归其实是对数据,进行 升维对吧,从更多角度去看待问题,这样 提高模型的准确度. 其实y=w0x0+w1x1.. 这里就是提高了这个x的个…

发现一个好玩的东西:Markdown 使用 Emoji 表情

Markdown 使用 Emoji 表情 玩法1、复制和粘贴表情符号2、使用表情符号简码Markdown 定义列表 玩法 有两种方法可以将表情符号添加到Markdown文件中: 将表情符号复制并粘贴到Markdown格式的文本中或者键入emoji shortcodes。 1、复制和粘贴表情符号 在大多数情况…

C++ 学习 ::【基础篇:06】:C++ (inline)内联函数的介绍及其出现的意义【对比于 C语言宏函数】

本系列 C 相关文章 仅为笔者学习笔记记录,用自己的理解记录学习!C 学习系列将分为三个阶段:基础篇、STL 篇、高阶数据结构与算法篇,相关重点内容如下: 基础篇:类与对象(涉及C的三大特性等&#…

基于html+css的图展示94

准备项目 项目开发工具 Visual Studio Code 1.44.2 版本: 1.44.2 提交: ff915844119ce9485abfe8aa9076ec76b5300ddd 日期: 2020-04-16T16:36:23.138Z Electron: 7.1.11 Chrome: 78.0.3904.130 Node.js: 12.8.1 V8: 7.8.279.23-electron.0 OS: Windows_NT x64 10.0.19044 项目…

SpringCloudAlibaba中篇(Sentinel,Seata)(超级无敌认真好用,万字收藏篇!!!!)

文章目录 SpringCloudAlibaba中篇(Sentinel,Seata)1 Sentinel(流量处理)1.1 分布式系统遇到的问题1.2 服务雪崩1.3 容错机制1.4 什么是Sentinel1.5 初步使用Sentinel-流控规则1.6 Sentinel- SentinelResource1.7 初步使用Sentinel-降级规则1.8 控制台部署…

计算机组成原理-指令系统-机器级语言表示(汇编)

目录 一、X86汇编语言指令基础 寄存器 常见的算数运算指令​编辑 常见逻辑运算指令 AT&T格式和 Intel格式指令 选择语句的机器级表示 循环语句的机器级表示 二、CISC和RISC 一、X86汇编语言指令基础 寄存器 常见的算数运算指令 常见逻辑运算指令 AT&T格式和 Intel格…

程序猿成长之路番外篇-如何理解牛顿迭代法及如何使用牛顿迭代法求数的平方根

小伙伴们好久不见,我又来了,这次我分享的内容是如何理解牛顿迭代法及如何使用牛顿迭代法求数的平方根 什么是牛顿迭代法? 官方话术:牛顿迭代法又称为牛顿-拉夫逊(拉弗森)方法(Newton-Raphson m…

【JavaSE】Java基础语法(二十五):异常

文章目录 1. 异常2. 编译时异常和运行时异常的区别3. JVM默认处理异常的方式4. 查看异常信息5. throws方式处理异常6. throw抛出异常7 . try-catch方式处理异常8. Throwable成员方法(应用)9. 自定义异常(应用) 1. 异常 异常的概述…

算法6.堆结构、堆排序、加强堆

算法|6.堆结构、堆排序、加强堆 1.比较器的定义 题意:定义一个学生类,分别实现对学生对象数组按年龄升序、按id降序、按名字的字典序、按id排序且id相同的年龄大的排在前边。 解题思路: 定义一个学生类定义一个实现了Comparator接口的类A…

前端包管理器的简介,pnpm的使用以及和npm的区别

随着前端的不断发展,包管理工具也不断的丰富,从最开始的npm到现在cnpm,pnpm,yarn,一个新的包管理工具的出现是为了弥补之前包管理工具的一个痛点,今天我就来说一下包管理器的出现的原因和pnpm的简单使用和一些包管理工具的一些区别…

【Vue】二:Vue核心处理---事件处理

文章目录 1. 事件修饰符1.1 prevent1.2 stop1.3 capture - 添加事件侦听器时使用 capture 模式。1.4 self1.5 one1.6 passive 2.按键修饰符3.系统修饰符 1. 事件修饰符 1.1 prevent 当我们点击后,回去先执行关联的事件,然后再去执行默认行为&#xff0c…

Arduino学习

物联网学习资料 《arduino程序设计基础》陈吕洲 北京航空航天大学出版社 半颗心脏博客导航一站式搜索(所有博客的汇总帖) Ai-Thinker 安信可科技 github 半颗心脏 | 徐宏 蓝牙技术 蓝牙网关【【智能家居】入门攻略二!啥是网关?蓝牙、zigbee协议详…

隐藏在背后的真相——数据存储的方式(上)

数据存储的方式 1. 数据类型详细介绍1.1类型的基本归 2. 整形在内存中的存储2.1原码,反码,补码2.2有符号(unsigned)和无符号(signed)2.3 例题 3. 大小端字节序介绍及判断 所属专栏:C语言❤️ &a…

学网络安全可以参考什么方向?该怎么学?

在这个圈子技术门类中,工作岗位主要有以下三个方向: 安全研发安全研究:二进制 方向安全研究:网络渗透方向 下面逐一说明一下。 安全研发 安全行业的研发岗主要有两种分类: 与安全业务关系不大的研发岗位与安全业务…

英文论文(sci)解读复现【NO.13】基于YOLOv5的自然场景下苹果叶片病害实时检测

此前出了目标检测算法改进专栏,但是对于应用于什么场景,需要什么改进方法对应与自己的应用场景有效果,并且多少改进点能发什么水平的文章,为解决大家的困惑,此系列文章旨在给大家解读发表高水平学术期刊中的 SCI论文&a…

python 真正的密码,字符串排序

代码: from typing import List def turePassword(wordList:List[str]) ->str:wordList list(set(wordList))#排序先字符串长度,其次字典序wordList.sort(keylambda x :(len(x),x))ans for i in range(len(wordList)-1,-1,-1):flag Truefor j in …

蓝奥声核心技术分享——无线同步群控技术

1.技术背景 无线同步群控技术指基于对目标场景状态变化的协同感知而获得触发响应并进行智能决策,属于蓝奥声核心技术--边缘协同感知(EICS)技术的关键支撑性技术之一。该项技术涉及无线物联网边缘域网络的无线通信与智能控制技术领域,具体主要…

浅谈人工智能怎么提升工作效率

一、引言 随着科技的飞速发展,人工智能(AI)逐渐成为各行各业提高工作效率的重要工具。本报告旨在通过分析人工智能在提高工作效率方面的作用,探讨其具体实现方法,并通过案例分析来深入了解其实际应用效果和优缺点&…