【数据库架构】PostgreSQL的最佳群集高可用性方案

news2024/11/27 4:26:01

如果您的系统依赖PostgreSQL数据库并且您正在寻找HA的集群解决方案，我们希望提前告知您这是一项复杂的任务，但并非不可能实现。

我们将讨论一些解决方案，您可以从中选择对您的容错要求。

PostgreSQL本身不支持任何多主群集解决方案，例如MySQL或Oracle。尽管如此，仍有许多商业和社区产品提供此实现，以及其他产品，例如PostgreSQL的复制或负载平衡。

首先，让我们回顾一些基本概念：

什么是高可用性？

它是服务可用的时间量，通常由企业定义。

冗余是高可用性的基础；万一发生事故，我们可以继续毫无问题地运转。

持续恢复

如果发生事件，则必须还原备份，然后应用wal日志；恢复时间将非常长，我们不会谈论高可用性。

但是，如果我们将备份和日志存档在应急服务器中，则可以在日志到达时应用它们。

如果日志每隔1分钟发送和应用一次，则应急基础将处于连续恢复状态，并且到生产的时间最多为1分钟。

备用数据库

备用数据库的想法是保留生产数据库的副本，该副本始终具有相同的数据，并且可以在发生事件时使用。

有几种方法可以对备用数据库进行分类：

根据复制的性质：

  • 物理备用数据库：复制磁盘块。

  • 逻辑备用数据库：流式传输数据更改。

通过事务的同步性：

  • 异步：可能会丢失数据。

  • 同步：不会丢失数据；主服务器中的提交等待备用服务器的响应。

通过用法：

  • 热备用：它们不支持连接。

  • 热备用：支持只读连接。

57c0138bda0f69d041d95adf44e194a6.jpeg

集群

群集是一组一起工作的主机，被视为一个主机。

这提供了一种实现水平可伸缩性的方法，并提供了通过添加服务器来处理更多工作的能力。

它可以抵抗节点的故障并继续透明地工作。

根据共享的内容，有两种模型：

99623079d640329f7619209e2e2ece85.jpeg

  • 共享存储：所有节点都使用相同的信息访问相同的存储。

  • 不共享：每个节点都有自己的存储，取决于我们系统的结构，该存储可能与其他节点具有相同的信息。

现在让我们回顾一下PostgreSQL中的一些集群选项。

分布式复制块设备 （Distributed Replicated Block Device）

DRBD是一个Linux内核模块，可使用网络实现同步块复制。它实际上不实现群集，也不处理故障转移或监视。为此，您需要补充软件，例如Corosync + Pacemaker + DRBD。

0c2255d317d7310f47397eae35082c19.jpeg

例：

  • Corosync：处理主机之间的消息。

  • Pacemaker：启动和停止服务，确保它们仅在一台主机上运行。

  • DRBD：在块设备级别同步数据。

48be5a1c0987fe0d5ff70af7f6a41ed0.jpeg

集群控制（ClusterControl）

ClusterControl是用于数据库集群的无代理管理和自动化软件。它可直接从其用户界面帮助部署，监视，管理和扩展数据库服务器/集群。

ClusterControl能够处理维护数据库服务器或群集所需的大多数管理任务。

7a5800898f90438a60e436a042207e04.jpeg

使用ClusterControl，您可以：

  • 在您选择的技术堆栈上部署独立的，复制的或群集的数据库。

  • 跨多语言数据库和动态基础架构统一自动化故障转移，恢复和日常任务。

  • 您可以创建完整或增量备份并计划它们。

  • 对整个数据库和服务器基础结构进行统一和全面的实时监控。

  • 只需一个操作即可轻松添加或删除节点。

在PostgreSQL上，如果发生事件，可以自动将您的从属提升为主状态。

它是一个非常完整的工具，带有免费的社区版本（还包括免费的企业试用版）。

757de86e43d2fa5684cc61c76c437d51.jpeg

0f2401d4cf69d43393ebc3c1768ff719.jpeg

红宝石 （Rubyrep）

异步，多主机，多平台复制（在Ruby或JRuby中实现）和多DBMS（MySQL或PostgreSQL）的解决方案。

基于触发器，它不支持DDL，用户或授权。

使用和管理的简单性是其主要目标。

一些功能：

  • 配置简单

  • 安装简单

  • 平台独立，表格设计独立。

Pgpool II

它是一种在PostgreSQL服务器和PostgreSQL数据库客户端之间工作的中间件。

一些功能：

  • 连接池

  • 复写

  • 负载均衡

  • 自动故障转移

  • 并行查询

28595abb4bc8b69f3bb96dc3b3655922.jpeg

Bucardo

基于行的异步级联主从复制，使用触发器在数据库中排队；基于行的异步主-主复制，基于行，使用触发器和自定义冲突解决方案。

Bucardo需要专用的数据库并作为Perl守护程序运行，该守护程序与此数据库以及复制中涉及的所有其他数据库进行通信。它可以作为多主机或多从机运行。

主从复制涉及到一个或多个目标的一个或多个源。源必须是PostgreSQL，但是目标可以是PostgreSQL，MySQL，Redis，Oracle，MariaDB，SQLite或MongoDB。

一些功能：

  1. 负载均衡

  2. 从站不受限制，可以写

  3. 部分复制

  4. 按需复制（更改可以自动或在需要时推送）

  5. 从站可以“预热”以快速设置

缺点：

  • 无法处理DDL

  • 无法处理大物件

  • 没有唯一键无法增量复制表

  • 不适用于Postgres 8之前的版本

Postgres-XC

Postgres-XC是一个开源项目，旨在提供可写扩展，同步，对称和透明的PostgreSQL集群解决方案。它是紧密耦合的数据库组件的集合，可以将其安装在多个硬件或虚拟机中。

写可伸缩性意味着Postgres-XC可以配置任意数量的数据库服务器，并且与单个数据库服务器相比，可以处理更多的写操作（更新SQL语句）。

您可以有多个客户端连接到的数据库服务器，该服务器提供数据库的单个一致的群集范围视图。

来自任何数据库服务器的任何数据库更新对于在不同主服务器上运行的任何其他事务都是立即可见的。

透明意味着您不必担心内部如何将数据存储在多个数据库服务器中。

您可以配置Postgres-XC在多个服务器上运行。您为每个表选择的数据以分布式方式存储，即分区或复制。发出查询时，Postgres-XC会确定目标数据的存储位置，并向包含目标数据的服务器发出相应的查询。

bb2b45a4fabcaa3aa2b89cca8344a30c.jpeg

Citus

Citus用内置的高可用性功能（例如自动分片和复制）替代了PostgreSQL。Citus分片将您的数据库分片，并在整个商品节点集群中复制每个分片的多个副本。如果群集中的任何节点不可用，Citus会将所有写入或查询透明地重定向到其他一个包含受影响的分片副本的节点。

一些功能：

  • 自动逻辑分片

  • 内置复制

  • 用于灾难恢复的数据中心感知复制

  • 具有高级负载平衡功能的中查询容错

您可以增加由PostgreSQL支持的实时应用程序的正常运行时间，并最大程度地减少硬件故障对性能的影响。您可以使用内置的高可用性工具来实现此目标，从而最大程度地减少成本高昂且易于出错的手动干预。

PostgresXL

它是一种无共享的多主群集解决方案，可以透明地在一组节点上分配表，并并行执行这些节点的查询。它具有一个称为全局事务管理器（GTM）的附加组件，用于提供群集的全局一致视图。该项目基于PostgreSQL 9.5版本。一些公司，例如2ndQuadrant，为该产品提供商业支持。

PostgresXL是可水平扩展的开源SQL数据库集群，具有足够的灵活性来处理各种数据库工作负载：

  • OLTP写密集型工作负载

  • 需要MPP并行性的商业智能

  • 运营数据存储

  • 键值存储

  • GIS地理空间

  • 混合工作负载环境

  • 多租户提供商托管环境

组件：

  • 全局事务监视器（GTM）：全局事务监视器确保群集范围内的事务一致性。

  • 协调器：协调器管理用户会话并与GTM和数据节点进行交互。

  • 数据节点：数据节点是存储实际数据的位置。

结论

还有许多其他产品可以为PostgreSQL创建我们的高可用性环境，但是您必须注意以下几点：

  • 新产品，未经充分测试

  • 停产项目

  • 局限性

  • 许可费用

  • 非常复杂的实现

  • 不安全的解决方案

您还必须考虑您的基础架构。如果只有一台应用程序服务器，那么无论您配置了多少数据库的高可用性，如果应用程序服务器发生故障，则将无法访问。您必须很好地分析基础架构中的单点故障，并尝试解决它们。

考虑到这些要点，您可以找到一种适合您的需求和要求的解决方案，而不会产生麻烦，并且能够实施您的高可用性群集解决方案。来吧，祝你好运！

本文 :https://architect.pub/top-pg-clustering-high-availability-ha-solutions-postgresql
讨论：知识星球【首席架构师圈】或者加微信小号【ca_cto】或者加QQ群【792862318】
公众号

【jiagoushipro】
【超级架构师】
精彩图文详解架构方法论，架构实践，技术原理，技术趋势。
我们在等你，赶快扫描关注吧。		9e08623610f42235743b9ffb4e63c743.jpeg
微信小号

【ca_cea】
50000人社区，讨论：企业架构，云计算，大数据，数据科学，物联网，人工智能，安全，全栈开发，DevOps，数字化.

20ee28c2cf29cc130085dbcfc6fdd3fa.jpeg

QQ群

【285069459】深度交流企业架构，业务架构，应用架构，数据架构，技术架构，集成架构，安全架构。以及大数据，云计算，物联网，人工智能等各种新兴技术。
加QQ群，有珍贵的报告和干货资料分享。

26914d6cb390870bae2756cc9dbba3ed.jpeg

视频号【超级架构师】
1分钟快速了解架构相关的基本概念，模型，方法，经验。
每天1分钟，架构心中熟。

0950af1f374ee0849551793e925d4c4f.jpeg

知识星球【首席架构师圈】向大咖提问，近距离接触，或者获得私密资料分享。

7c62b77165c37473442bf61f07ca6dfe.jpeg

喜马拉雅【超级架构师】路上或者车上了解最新黑科技资讯，架构心得。【智能时刻，架构君和你聊黑科技】
知识星球认识更多朋友，职场和技术闲聊。知识星球【职场和技术】
领英Harryhttps://www.linkedin.com/in/architect-harry/
领英群组领英架构群组
https://www.linkedin.com/groups/14209750/
微博‍‍【超级架构师】智能时刻‍
哔哩哔哩【超级架构师】

fd56a494179962b19f9225213ae12cc7.jpeg

抖音【cea_cio】超级架构师

81596d583861e788c74a02e6ab9a979e.jpeg

快手【cea_cio_cto】超级架构师

b5206584804a86c3c1ac65220d75d2e3.jpeg

小红书【cea_csa_cto】超级架构师

57eb7bca28d965b29b862ac07486f956.jpeg

网站CIO(首席信息官)https://cio.ceo
网站CIO,CTO和CDOhttps://cioctocdo.com
网站架构师实战分享https://architect.pub   
网站程序员云开发分享https://pgmr.cloud
网站首席架构师社区https://jiagoushi.pro
网站应用开发和开发平台https://apaas.dev
网站开发信息网https://xinxi.dev
网站超级架构师https://jiagou.dev
网站企业技术培训https://peixun.dev
网站程序员宝典https://pgmr.pub    
网站开发者闲谈https://blog.developer.chat
网站CPO宝典https://cpo.work
网站首席安全官https://cso.pub    ‍
网站CIO酷https://cio.cool
网站CDO信息https://cdo.fyi
网站CXO信息https://cxo.pub

谢谢大家关注，转发，点赞和点在看。

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/475108.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

Python Unet ++ :医学图像分割，医学细胞分割，Unet医学图像处理，语义分割

Python Unet ++ :医学图像分割，医学细胞分割，Unet医学图像处理，语义分割

一，语义分割：分割领域前几年的发展 图像分割是机器视觉任务的一个重要基础任务，在图像分析、自动驾驶、视频监控等方面都有很重要的作用。图像分割可以被看成一个分类任务，需要给每个像素进行分类，所以就比图像分类任务…
阅读更多...
C++-FFmpeg-8-（1）基本概念与原理-rtsp-I、P、B 帧-DTS、PTS-

C++-FFmpeg-8-（1）基本概念与原理-rtsp-I、P、B 帧-DTS、PTS-

目录 1.rtsp是什么？ 2. I、P、B 帧 3.DTS、PTS 4.rtsp协议抓包分析？ 1.rtsp是什么？ 流程： 鉴权： 2种 ：basice64 Digest 哈希值 哈希值不可逆。nonce 做的单项散列（MD5,SHA512&#xff0…
阅读更多...
HTML（二） -- 表格设计

HTML（二） -- 表格设计

目录 1. 基本格式&#xff1a; 表格常用属性&#xff1a; 2. 表格标签 为什么使用表格&#xff1f; 简单通用、结构稳定数据显示的非常的规整、可读性非常好 1. 基本格式&#xff1a; <table style"border: 1px solid black;" border"1px">&l…
阅读更多...
AWE2023什么值得看？智哪儿带你五大关键词读懂AWE2023

AWE2023什么值得看？智哪儿带你五大关键词读懂AWE2023

4月27至30日&#xff0c;2023年中国家电及消费电子博览会&#xff08;AWE 2023&#xff09;在上海浦东新国际博览中心开展。 作为与德国IFA、美国CES并肩的全球前三国际家电及消费电子展览会&#xff0c;时隔两年AWE终于重启。沉淀两年&#xff0c;它的规模也是历年最大&#x…
阅读更多...
QT+OpenCV配置

QT+OpenCV配置

QTOpenCV配置 1 下载CMake2 安装CMake3 下载OPenCV4 配置环境变量4.1 配置QT环境变量4.2 配置CMake环境变量4.3 重启电脑生效 5 CMake编译OPenCV5.1 解决报错 6 测试 1 下载CMake 链接&#xff1a;https://cmake.org/download/ 2 安装CMake 3 下载OPenCV 链接&#xff1a;htt…
阅读更多...
本地elasticsearch中文分词器 ik分词器安装及使用

本地elasticsearch中文分词器 ik分词器安装及使用

ElasticSearch 内置了分词器&#xff0c;如标准分词器、简单分词器、空白词器等。但这些分词器对我们最常使用的中文并不友好&#xff0c;不能按我们的语言习惯进行分词。 ik分词器就是一个标准的中文分词器。它可以根据定义的字典对域进行分词&#xff0c;并且支持用户配置自…
阅读更多...
网络设备中VRRP协议和Linux服务器中keepalived的两个区别

网络设备中VRRP协议和Linux服务器中keepalived的两个区别

1、什么是VRRP&#xff1f;keepalived又是什么&#xff1f; VRRP全称是Virtual Router Redundancy Protocol&#xff0c;即虚拟路由冗余协议。它的主要目的是在一个网络中提供冗余的路由。当一个三层网络设备或服务器出现故障时&#xff0c;VRRP可以确保网络仍能正常工作。VRR…
阅读更多...
在.NET Core中正确使用HttpClient的方式

在.NET Core中正确使用HttpClient的方式

HttpClient 是 .NET Framework、.NET Core 或 .NET 5以上版本中的一个类&#xff0c;用于向 Web API 发送 HTTP 请求并接收响应。它提供了一些简单易用的方法&#xff0c;如 GET、POST、PUT 和 DELETE&#xff0c;可以很容易地构造和发送 HTTP 请求&#xff0c;并处理响应数据。…
阅读更多...
算法之时间复杂度---数据结构

算法之时间复杂度---数据结构

目录 前言&#xff1a; 1.时间复杂度 1.1时间复杂度的理解 1.2规模与基本操作执行次数 1.3大O渐进表示法 1.4计算基本操作的次数 2.常见的时间复杂度及其优劣比较 ❤博主CSDN&#xff1a;啊苏要学习 ▶专栏分类&#xff1a;数据结构◀ 学习数据结构是一件有趣的事情&…
阅读更多...
2023五一数学建模B题完整模型代码【原创首发】

2023五一数学建模B题完整模型代码【原创首发】

已经完成五一数学建模全部内容&#xff0c;大家可以文末查看&#xff01;&#xff01;供参考使用&#xff01; 摘要 随着网络购物的普及和发展&#xff0c;快递行业需求持续增长&#xff0c;对于快递公司来说&#xff0c;准确预测运输需求以及合理规划运输线路和仓库布局变得…
阅读更多...
分享一个有意思的键盘，我们就只会ctrl c+v

分享一个有意思的键盘，我们就只会ctrl c+v

先上效果图&#xff1a; 再上代码&#xff1a; <!DOCTYPE html> <html lang"en"> <head><meta charset"UTF-8"><title>Title</title><style>* {border: 0;box-sizing: border-box;margin: 0;padding: 0;}:roo…
阅读更多...
【pyTorch学习笔记④】PyTorch基础·中篇

【pyTorch学习笔记④】PyTorch基础·中篇

文章目录 三、Numpy与Tensor3.Tensor的索引4.Tensor的广播机制5.逐元素操作6.归并操作7.比较操作8.矩阵操作9.PyTorch与Numpy的比较 相关推荐 三、Numpy与Tensor 3.Tensor的索引 &#xff08;1&#xff09;item&#xff1a;若Tensor为单元素&#xff0c;则返回标量&#xff0…
阅读更多...
驱动开发：通过MDL映射实现多次通信

驱动开发：通过MDL映射实现多次通信

在前几篇文章中LyShark通过多种方式实现了驱动程序与应用层之间的通信&#xff0c;这其中就包括了通过运用SystemBuf缓冲区通信&#xff0c;运用ReadFile读写通信&#xff0c;运用PIPE管道通信&#xff0c;以及运用ASYNC反向通信&#xff0c;这些通信方式在应对一收一发模式的时…
阅读更多...
【Java笔试强训 8】

【Java笔试强训 8】

&#x1f389;&#x1f389;&#x1f389;点进来你就是我的人了博主主页&#xff1a;&#x1f648;&#x1f648;&#x1f648;戳一戳,欢迎大佬指点! 欢迎志同道合的朋友一起加油喔&#x1f93a;&#x1f93a;&#x1f93a; 目录 一、选择题 二、编程题 &#x1f525;两种排…
阅读更多...
【Java笔试强训 6】

【Java笔试强训 6】

&#x1f389;&#x1f389;&#x1f389;点进来你就是我的人了博主主页&#xff1a;&#x1f648;&#x1f648;&#x1f648;戳一戳,欢迎大佬指点! 欢迎志同道合的朋友一起加油喔&#x1f93a;&#x1f93a;&#x1f93a; 目录 一、选择题 二、编程题 &#x1f525;不要二 …
阅读更多...
权限提升：本地权限提升.（AT || SC || PS ）

权限提升：本地权限提升.（AT || SC || PS ）

权限提升&#xff1a;本地权限提升. 权限提升简称提权&#xff0c;由于操作系统都是多用户操作系统&#xff0c;用户之间都有权限控制&#xff0c;比如通过 Web 漏洞拿到的是 Web 进程的权限&#xff0c;往往 Web 服务都是以一个权限很低的账号启动的&#xff0c;因此通过 Web…
阅读更多...
JavaScript用map实现Hashmap

JavaScript用map实现Hashmap

&#x1f4dd;个人主页&#xff1a;爱吃炫迈 &#x1f48c;系列专栏&#xff1a;数据结构与算法 &#x1f9d1;‍&#x1f4bb;座右铭&#xff1a;道阻且长&#xff0c;行则将至&#x1f497; 文章目录 正如我们已经看到的&#xff0c;Map 对象是一个键值对。最初&#xff0c;M…
阅读更多...
〖Python网络爬虫实战⑲〗- 数据存储之CSV文件

〖Python网络爬虫实战⑲〗- 数据存储之CSV文件

订阅&#xff1a;新手可以订阅我的其他专栏。免费阶段订阅量1000 python项目实战 Python编程基础教程系列&#xff08;零基础小白搬砖逆袭) 说明&#xff1a;本专栏持续更新中&#xff0c;目前专栏免费订阅&#xff0c;在转为付费专栏前订阅本专栏的&#xff0c;可以免费订阅付…
阅读更多...
第二部分——长难句——第二章——复合句——第一节——名词性从句

第二部分——长难句——第二章——复合句——第一节——名词性从句

首先复合句是什么呢&#xff1f; 多件事一样重要就叫并列句&#xff0c;如果不一样重要就叫并列句。 复合句主句从句 下面我们来看一个例句&#xff1a; 找到从句之后剩下来的不就是主句吗&#xff1f; 一&#xff0c;宾语从句 &#xff08;一&#xff09;宾语从句的含义 一…
阅读更多...
字符串中的第一个唯一字符

字符串中的第一个唯一字符

题目&#xff1a;字符串中的第一个唯一字符 思路一&#xff1a;暴力查找&#xff0c;时间复杂度 思路一&#xff1a;开辟检查重复数组,以空间换时间&#xff0c;时间复杂度 这段代码的作用是在一个字符串 s 中找到第一个不重复&#xff08;只出现一次&#xff09;的字符&#…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023