PostgreSQL-HA 高可用集群在 Rainbond 上的部署方案

news2024/9/21 22:45:35

PostgreSQL 是一种流行的开源关系型数据库管理系统。它提供了标准的SQL语言接口用于操作数据库。

repmgr 是一个用于 PostgreSQL 数据库复制管理的开源工具。它提供了自动化的复制管理，包括：

  • 故障检测和自动故障切换：repmgr 可以检测到主服务器故障并自动切换到备用服务器。
  • 自动故障恢复：repmgr 可以检测到从服务器故障并自动将其重新加入到复制拓扑中。
  • 多个备用服务器：repmgr 支持多个备用服务器，可以在主服务器故障时自动切换到最合适的备用服务器。
  • 灵活的复制拓扑：repmgr 支持各种复制拓扑，包括单主服务器和多主服务器。
  • 管理和监控：repmgr 提供了用于管理和监控PostgreSQL复制的各种工具和命令。

可以说 repmgr 是一个扩展模块，简化了 PostgreSQL 复制的管理和维护，提高系统的可靠性和可用性。它是一个非常有用的工具，特别是对于需要高可用性的生产环境。同时 repmgr 也是由 Postgresql 社区开发以及维护的。

Pgpool 是一个高性能的连接池和负载均衡器，用于 PostgreSQL 数据库。Pgpool 可以作为中间层，位于客户端和 PostgreSQL 服务器之间，来管理连接请求并分配给不同的 PostgreSQL 服务器进行处理，以提高整体的系统性能和可用性。Pgpool 的一些主要功能包括：

  • 连接池：Pgpool在应用程序和数据库之间建立一个连接池，使得多个应用程序可以共享一组数据库连接，避免了重复的连接和断开。
  • 负载均衡：Pgpool可以将客户端请求均衡地分配到多个PostgreSQL服务器上，以实现负载均衡和更好的性能。
  • 高可用性：Pgpool可以检测到PostgreSQL服务器的故障，并自动将客户端请求重新路由到其他可用服务器，从而提高系统的可用性和稳定性。
  • 并行查询：Pgpool可以将大型查询分成几个子查询，然后将这些子查询并行发送到多个PostgreSQL服务器上执行，以提高查询性能。

本文将介绍在 Rainbond 上使用 Postgresql-repmgr + Pgpool 实现 Postgresql 高可用集群的部署和管理。

架构

当使用 Postgresql HA 集群时，应用只需连接 pgpool 即可。

  • 通过 pgpool 实现读写分离，写入操作由 Master 执行，读取操作由 Slave 执行。
  • 由 repmgr 实现流复制，Master 数据自动复制到 Slave。
  • 当 Master 遇故障下线时，由 repmgr 自定选择 Slave 为 Master，并继续执行写入操作。
  • 当某个节点遇故障下线时，由 pgpool 自动断开故障节点的连接，并切换到可用的节点上。

部署 Rainbond

安装 Rainbond，可通过一条命令快速安装 Rainbond，或选择 基于主机安装 和 基于 Kubernetes 安装 Rainbond。

curl -o install.sh https://get.rainbond.com && bash ./install.sh

通过 Rainbond 开源应用商店部署 PostgreSQL 集群

Postgresql HA 集群已发布到 Rainbond 开源应用商店，可一键部署 Postgresql HA 集群。

登陆 Rainbond 控制台，进入 平台管理 -> 应用市场 -> 开源应用商店 中搜索 postgresql-ha 并安装。

安装完成后的拓扑图如下。

配置 Pgpool 组件

  1. 获取 PostgreSQL-repmgr 连接地址，进入 PostgreSQL-repmgr 组件的 Web 终端内。
env | grep REPMGR_PARTNER_NODES

  1. 将上述的内容复制出并修改成以下格式，然后进入 Pgpool 组件内，修改PGPOOL_BACKEND_NODES 环境变量，并更新组件。
0:pg-grde8ebc-0.pg-grde8ebc.dev.svc.cluster.local:5432,1:pg-grde8ebc-1.pg-grde8ebc.dev.svc.cluster.local:5432,2:pg-grde8ebc-2.pg-grde8ebc.dev.svc.cluster.local:5432

  1. 验证集群，进入 Pgpool 组件的 Web 终端中。
# 连接 postgresql
PGPASSWORD=$PGPOOL_POSTGRES_PASSWORD psql -U $PGPOOL_POSTGRES_USERNAME -h localhost

# 查询集群节点
show pool_nodes;

status 字段均为 UP 即可。

从零开始部署 PostgreSQL 集群

从零开始在 Rainbond 上部署 Postgresql HA 集群也是非常简单的，大致分为以下几个步骤：

  • 基于镜像部署 PostgreSQL-repmgr 组件，并修改组件配置。
  • 基于镜像部署 pgpool 组件，并修改组件配置。
  • 建立组件之间的依赖关系。

镜像均采用 bitnami 制作的 postgresql-repmgr 和 pgpool，因 bitnami 制作的镜像将很多配置文件都抽离成了环境变量，配置比较方便。

部署 PostgreSQL-repmgr 组件

1. 创建组件

进入团队内 -> 新建组件 -> 基于镜像创建组件，应用、组件、英文名称等自定义即可，镜像填写 bitnami/postgresql-repmgr:14.7.0。

2. 修改组件类型

进入组件内 -> 其他设置，将组件部署类型修改为 有状态服务。

3. 添加环境变量

进入组件内 -> 环境变量，新增以下环境变量：

# 默认初始化的数据库
POSTGRESQL_DATABASE=initialize

# 创建普通用户和密码
POSTGRESQL_USERNAME=admin
POSTGRESQL_PASSWORD=admin@123

# 管理员 postgres 密码
POSTGRESQL_POSTGRES_PASSWORD=postgres@123

# repmgr 用户密码
REPMGR_PASSWORD=repmgrpass

# 初始化主节点的 HOST。Rainbond 控制台自动渲染 SERVICE_NAME 变量，获取当前 Statefulset 的控制器名称。
REPMGR_PRIMARY_HOST=${SERVICE_NAME}-0.${SERVICE_NAME}.${NAMESPACE}.svc.cluster.local

# 集群中的所有节点，以逗号分隔
REPMGR_PARTNER_NODES=${SERVICE_NAME}-0.${SERVICE_NAME}.${NAMESPACE}.svc.cluster.local,${SERVICE_NAME}-1.${SERVICE_NAME}.${NAMESPACE}.svc.cluster.local,${SERVICE_NAME}-2.${SERVICE_NAME}.${NAMESPACE}.svc.cluster.local

进入组件内 -> 其他设置，添加 Kubernetes 属性，选择 env，添加以下内容：

# repmgr 节点名称
- name: REPMGR_NODE_NAME
  value: "$(POD_NAME)"
# repmgr 节点网络名称
- name: REPMGR_NODE_NETWORK_NAME
  value: "$(POD_NAME).$(SERVICE_NAME).$(NAMESPACE).svc.cluster.local"
  
### "$(POD_NAME)" 用于定义 env 之间的相互依赖

4. 添加组件存储

进入组件内 -> 存储，添加新的存储，存储路径为 /bitnami/postgresql，其他自定义即可。

5. 启动组件

在组件视图内构建组件等待构建完成并启动。

6. 修改组件实例数量

进入组件内 -> 伸缩，将组件实例数量设置为 3，等待所有实例启动即可。

部署 pgpool 组件

1. 创建组件

进入团队内 -> 新建组件 -> 基于镜像创建组件，应用、组件、英文名称等自定义即可，镜像填写 bitnami/pgpool:4.4.2。

2. 添加环境变量

进入组件内 -> 环境变量，新增以下环境变量：

# pgpool admin 用户与密码
PGPOOL_ADMIN_USERNAME=admin
PGPOOL_ADMIN_PASSWORD=admin@123

# postgres 用户与密码
PGPOOL_POSTGRES_USERNAME=postgres
PGPOOL_POSTGRES_PASSWORD=postgres@123

# 用于执行流检查的用户和密码
PGPOOL_SR_CHECK_USER=admin
PGPOOL_SR_CHECK_PASSWORD=admin@123

# postgresql 后端节点。节点列表获取进入到 PostgreSQL-repmgr 组件的 Web 终端内，使用 env | grep REPMGR_PARTNER_NODES 命令获取，然后修改为以下格式
PGPOOL_BACKEND_NODES=0:postgresql-ha-repmgr-0.postgresql-ha-repmgr.dev.svc.cluster.local:5432,1:postgresql-ha-repmgr-1.postgresql-ha-repmgr.dev.svc.cluster.local:5432,2:postgresql-ha-repmgr-2.postgresql-ha-repmgr.dev.svc.cluster.local:5432

3. 添加依赖

在应用视图，将 pgpool 组件依赖至 PostgreSQL-repmgr 组件。

4. 启动组件

在 pgpool 组件视图内构建组件等待构建完成并启动。

5. 验证集群

进入 Pgpool 组件的 Web 终端中，输入以下命令验证集群：

# 连接 postgresql
PGPASSWORD=$PGPOOL_POSTGRES_PASSWORD psql -U $PGPOOL_POSTGRES_USERNAME -h localhost

# 查询集群节点
show pool_nodes;

status 字段均为 UP 即可。

最后

外部连接

如想使用本地工具连接到 postgresql，可在 pgpool 组件的端口内打开对外服务端口，通过该端口连接到 postgresql，默认用户密码为 postgres/postgres@123。

验证高可用集群

为了保障高可用集群，Kubernetes 集群至少有 3 个节点，且底层存储使用分布式存储，如没有分布式存储，需将 Postgresql 存储切换为本地存储也可保障高可用集群的数据。可通过以下方式进行高可用集群验证：

  • 通过 Pgpool 连接后，创建数据库并写入数据，再进入 PostgreSQL-repmgr 组件的 Web 终端内查询每个实例是否都有数据。
  • 挂掉主节点，验证是否主节点自动切换并可正常连接并写入。

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/506064.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

二叉搜索树中的插入操作

二叉搜索树中的插入操作

1题目 给定二叉搜索树（BST）的根节点 root 和要插入树中的值 value ，将值插入二叉搜索树。 返回插入后二叉搜索树的根节点。 输入数据 保证 ，新值和原始二叉搜索树中的任意节点值都不同。 注意，可能存在多种有效的插入…
阅读更多...
YOLOv3论文解读/总结

YOLOv3论文解读/总结

本章论文： YOLOv3论文（YOLOv3: An Incremental Improvement）（原文＋解读/总结＋翻译） 系列论文： YOLOv1论文解读/总结_yolo论文原文_耿鬼喝椰汁的博客-CSDN博客 YOLOv2论文解读/总…
阅读更多...
try(){}用法try-with-resources、try-catch-finally

try(){}用法try-with-resources、try-catch-finally

属于Java7的新特性。 经常会用try-catch来捕获有可能抛出异常的代码。如果其中还涉及到资源的使用的话，最后在finally块中显示的释放掉有可能被占用的资源。 但是如果资源类已经实现了AutoCloseable这个接口的话，可以在try()括号中可以写操作资源的语句(…
阅读更多...
cocos 项目实践总结

cocos 项目实践总结

文章目录 组件文档的理解：开发过程顺序问题：1、获取锚点坐标2、事件监听3、批量生成选词按钮4、Button可以自定义边界、边界颜色、及弧度一些问题记录1、button点击过后重新恢复页面渲染，button的状态偶发还是点击态而非正常态2、偶发事件绑定…
阅读更多...
【自动驾驶基础入门】SLAM应该怎么学习？

【自动驾驶基础入门】SLAM应该怎么学习？

1、SLAM是什么？ SLAM是Simultaneous Localization and Mapping的缩写，即同时定位与地图构建。也称为自主机器人导航或者无人车等领域的基本任务之一。 简单来说，SLAM是指在未知环境中，通过移动机器人并利用其搭载的各种传感器数据…
阅读更多...
Yolov5训练日记~如何用Yolov5训练识别自己想要的模型~

Yolov5训练日记~如何用Yolov5训练识别自己想要的模型~

目录 一.数据集准备 二.标签设置 三.模型训练 四.模型测试 最近尝试了Yolov5训练识别人体，用的是自己尝试做的训练集。见识到Yolo的强大后，决定分享给大家。 一.数据集准备 数据集是从百度图片上下载的，我当然不可能一个一个下载&#xff…
阅读更多...
还没用过这12款建筑设计软件？你OUT了

还没用过这12款建筑设计软件？你OUT了

每个建筑设计软件都针对不同的需求。选择最好的一个取决于许多因素，例如成本、与其他程序的兼容性以及您愿意花在绘图过程上的时间。它还取决于您在设计过程中所处的位置——我们可能都开始在纸上画草图，然后转向建筑软件。我们甚至需要图形设计软件来说…
阅读更多...
Haoop集群的搭建（小白教学）

Haoop集群的搭建（小白教学）

搭建hadoop集群我们必须拥有自己的虚拟机，下列我会给大家奉上超详细的集群搭建以及我在搭建的时候碰到的问题以及对应解决办法，正所谓自己走过的错路是曲折的，也是防止大家做弯路，不仅浪费时间还心态爆炸，下面带走入ha…
阅读更多...
蜘蛛池搭建需要多少域名？全面解析！

蜘蛛池搭建需要多少域名？全面解析！

蜘蛛池是指为搜索引擎爬虫提供优质、可靠的页面，从而提高网站的收录和排名。在蜘蛛池搭建过程中，域名数量是一个非常重要的问题。那么，蜘蛛池搭建需要多少域名呢？本文将对这个问题进行全面解析。 首先，我们需要了解什么…
阅读更多...
SQL教程

SQL教程

1、基础 演示数据库，下面是选自 “Websites” 表的数据： SELECT 语句用于从数据库中选取数据。 SELECT name,country FROM Websites;SELECT DISTINCT 语句用于返回唯一不同的值。 SELECT DISTINCT country FROM Websites;WHERE 子句用于提取那些满足…
阅读更多...
二十三种设计模式第五篇--原型模式

二十三种设计模式第五篇--原型模式

原型模式（Prototype Pattern）是用于创建重复的对象，同时又能保证性能。这种类型的设计模式属于创建型模式，它提供了一种创建对象的最佳方式。 这种模式是实现了一个原型接口，该接口用于创建当前对象的克隆。当直接创建…
阅读更多...
Linux网络——Shell编程之循环

Linux网络——Shell编程之循环

Linux网络——Shell编程之循环 一、循环1.循环与遍历2.循环的优势 二、for 循环语句1.for 语句的结构2.for语句应用示例 三、while 循环语句1.while 语句的结构2.while语句应用示例 四、until 循环五、跳出循环1.break2.continue3.exit 六、死循环 一、循环 定义：循…
阅读更多...
2023年适合营销公司使用的十大「社交媒体管理」工具

2023年适合营销公司使用的十大「社交媒体管理」工具

在遍地都是数字营销公司的时代，对品牌来说，拥有强大的社交媒体影响力以保持竞争力从未如此重要。 而对于管理一个或多个品牌的数字营销公司来说，从内容创作到执行报告，使用正确的工具可以帮助你做到这一点。从规划、管理和跟踪社…
阅读更多...
idb使用教程（一）

idb使用教程（一）

概述 iOS开发桥（idb）是一个多功能的工具，用于自动化iOS模拟器和设备。它在一个一致的、对人友好的界面中暴露了很多分布在苹果工具中的功能。 安装 idb由两个部分组成，每个部分都需要单独安装。 idb伴侣 每个目标&#xff08…
阅读更多...
《花雕学AI》ChatMind：与AI对话，轻松梳理思路并创建思维导图

《花雕学AI》ChatMind：与AI对话，轻松梳理思路并创建思维导图

引言： 思维导图是一种有效的思维工具，可以帮助用户整理和表达自己的思路，提高学习和工作的效率和质量。然而，传统的思维导图工具往往需要用户花费大量的时间和精力，学习和操作复杂的界面和功能，而且很难根据…
阅读更多...
医院智能导诊系统，医院导航解决方案

医院智能导诊系统，医院导航解决方案

随着现代医院规模不断扩大，功能区域越来越细化，面对复杂的楼宇结构，集中的就诊人流，患者在就诊中经常会面临找不到目的地的困境，就诊体验变差。针对这个问题，一些面积和规模都比较大的医院，已经…
阅读更多...
html实现经典打方块小游戏

html实现经典打方块小游戏

文章目录 1.设计来源1.1 主界面1.2 游戏界面1.3 游戏结束界面 2.效果和源码2.1 动态效果2.2 源代码 源码下载 作者：xcLeigh 文章地址：https://blog.csdn.net/weixin_43151418/article/details/130581985 html实现经典打方块小游戏源码 html实现经典打方块…
阅读更多...
自主可控不走捷径，中国长城做难且正确的事

自主可控不走捷径，中国长城做难且正确的事

2020-2022年是中国信创产业的重要推广期，在国家战略的支持下，自主可控领域诸多相关企业均获得绝佳发展良机。 但信创产业“完成替代”不是终点，“实现领先”方是目标。如今势已启、路尚远，前景广阔的市场并不意味着自主可控相关企…
阅读更多...
运营商三要素验证原理，这篇文章就够了！

运营商三要素验证原理，这篇文章就够了！

引言 运营商三要素验证 API 是一种基于手机号码、身份证号码和姓名等三种信息的验证服务，主要用于验证用户身份信息的真实性和一致性，以及查询手机号码所属的运营商信息。 运营商三要素 API 的验证原理 1. 身份验证的原理 身份信息验证是运营商三要素…
阅读更多...
入门级的家用洗地机怎么样？入门级洗地机推荐

入门级的家用洗地机怎么样？入门级洗地机推荐

洗地机的功能有很多，比如除菌、洗地机清洁地面的确是一把好手。但是！清洁完之后还要手动清洗洗地机，是一件麻烦事啊！现在市面上大部分洗地机都有自清洁这个功能，但是很多洗地机的自清洁并不算真正的自清洁，…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023