一线实战：国产数据库Mogdb双网卡同步最佳实践

news2024/9/28 9:21:02

前言

大家都知道Oracle数据库无论是单机还是RAC集群在进行生产部署实施时，我们都会对网卡做冗余考虑，使用双网卡，比如public、心跳网络。这样的目的主要是为了安全，避免单点故障。当然双网卡Bond不仅是可以做主备还可以支持负载均衡。这里我们先不展开讨论。

有用户从Oracle迁移到MogDB的时候就会问到：MogDB 的高可用怎么做，支持双网卡吗？

这里我可以肯定得告诉大家，MogDB支持！而且支持得非常好！

MogDB双网卡有什么用？

.双重网络路径：两个网络接口卡提供了双重网络路径，增加了冗余性和容错能力。 .故障转移能力：如果其中一个网络接口发生故障，另一个可以接管数据同步任务，从而保持持续的数据一致性。 .提高可靠性：在高负载或网络不稳定的情况下，双网卡配置提供了更高的可靠性和稳定性。

以下是真实生产环境的系统架构图:

alt

架构描述： 1、使用Mogha组件构建高可用架构，主从复制都为同步模式。 2、主用云和备用云同步是单网模式，线控站有独立的A网和B网双网模式，A\B网通过云出口交换机与主备云主机互通。 3、每个中心都有一组VIP，云主中心（vip1），云备中心（vip2）、线控站（vip3，vip4）； 4、每个应用服务器都连接主库，Mogha只会把主库的vip挂载，通过驱动设置ip list，自动连接能ping通的vip，即为主库；

ip规划

机房名主机名ipvip
主用云mogdb01192.168.1.3192.168.1.30
主用云mogdb02192.168.1.4192.168.1.30
备用云mogdb03192.168.3.3192.168.3.30
线控站mogdb04192.168.4.101/192.168.5.101192.168.4.100/192.168.5.100

配置步骤

1、查看主机列表

cat /etc/hosts
127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4
::1         localhost localhost.localdomain localhost6 localhost6.localdomain6

192.168.1.3    1  # ptk added
192.168.1.4    2  # ptk added
192.168.3.3    3  # ptk added
192.168.4.101  4  # ptk added

2、配置pg_hba.conf

添加互信，不然会出现Forbid remote connection with initia1 user的报错。

local   all             all                                     trust
host    all    omm    192.168.1.3/32    trust
host    all    omm    192.168.1.4/32    trust
host    all    omm    192.168.3.3/32    trust
host    all    omm    192.168.4.101/32    trust
host    all    omm    192.168.5.101/32    trust
# IPv4 local connections:
host    all             all             127.0.0.1/32            trust
host    all    all    192.168.1.3/32    sha256
host    all    all    192.168.1.4/32    sha256
host    all    all    192.168.3.3/32    sha256
host    all    all    192.168.4.101/32    sha256
host    all    all    192.168.5.101/32    sha256

3、流复制通道配置

配置replconninfoN，主备云因为是单网，只需要配置一个流复制通道，线控站有A\B网，因此需要配置两个流复制通道。 参数说明: 设置本端侦听和鉴权的第N个节点信息（N=1, 2, 3, ...8）。 具体配置如下：

分别修改4台机器的postgresql.conf

192.168.1.3:
replconninfo1 = 'localhost=192.168.1.3 localport=26001 localheartbeatport=26005 localservice=26004 remotehost=192.168.1.4 remoteport=26001 remoteheartbeatport=26005 remoteservice=26004'        
replconninfo2 = 'localhost=192.168.1.3 localport=26001 localheartbeatport=26005 localservice=26004 remotehost=192.168.3.3 remoteport=26001 remoteheartbeatport=26005 remoteservice=26004'         
replconninfo3 = 'localhost=192.168.1.3 localport=26001 localheartbeatport=26005 localservice=26004 remotehost=192.168.4.101 remoteport=26001 remoteheartbeatport=26005 remoteservice=26004'          
replconninfo4 = 'localhost=192.168.1.3 localport=26001 localheartbeatport=26005 localservice=26004 remotehost=192.168.5.101 remoteport=26001 remoteheartbeatport=26005 remoteservice=26004' 

192.168.1.4的postgresql.conf:
replconninfo1 = 'localhost=192.168.1.4 localport=26001 localheartbeatport=26005 localservice=26004 remotehost=192.168.1.3 remoteport=26001 remoteheartbeatport=26005 remoteservice=26004'      
replconninfo2 = 'localhost=192.168.1.4 localport=26001 localheartbeatport=26005 localservice=26004 remotehost=192.168.3.3 remoteport=26001 remoteheartbeatport=26005 remoteservice=26004'    
replconninfo3 = 'localhost=192.168.1.4 localport=26001 localheartbeatport=26005 localservice=26004 remotehost=192.168.4.101 remoteport=26001 remoteheartbeatport=26005 remoteservice=26004'           
replconninfo4 = 'localhost=192.168.1.4 localport=26001 localheartbeatport=26005 localservice=26004 remotehost=192.168.5.101 remoteport=26001 remoteheartbeatport=26005 remoteservice=26004'          

192.168.3.3:
replconninfo1 = 'localhost=192.168.3.3 localport=26001 localheartbeatport=26005 localservice=26004 remotehost=192.168.1.3 remoteport=26001 remoteheartbeatport=26005 remoteservice=26004'         
replconninfo2 = 'localhost=192.168.3.3 localport=26001 localheartbeatport=26005 localservice=26004 remotehost=192.168.1.4 remoteport=26001 remoteheartbeatport=26005 remoteservice=26004'        
replconninfo3 = 'localhost=192.168.3.3 localport=26001 localheartbeatport=26005 localservice=26004 remotehost=192.168.4.101 remoteport=26001 remoteheartbeatport=26005 remoteservice=26004'            
replconninfo4 = 'localhost=192.168.3.3 localport=26001 localheartbeatport=26005 localservice=26004 remotehost=192.168.5.101 remoteport=26001 remoteheartbeatport=26005 remoteservice=26004'        

192.168.4.101(192.168.5.101):
replconninfo1 = 'localhost=192.168.4.101 localport=26001 localheartbeatport=26005 localservice=26004 remotehost=192.168.1.3 remoteport=26001 remoteheartbeatport=26005 remoteservice=26004'            
replconninfo2 = 'localhost=192.168.5.101 localport=26001 localheartbeatport=26005 localservice=26004 remotehost=192.168.1.3 remoteport=26001 remoteheartbeatport=26005 remoteservice=26004'            
replconninfo3 = 'localhost=192.168.4.101 localport=26001 localheartbeatport=26005 localservice=26004 remotehost=192.168.1.4 remoteport=26001 remoteheartbeatport=26005 remoteservice=26004'           
replconninfo4 = 'localhost=192.168.5.101 localport=26001 localheartbeatport=26005 localservice=26004 remotehost=192.168.1.4 remoteport=26001 remoteheartbeatport=26005 remoteservice=26004'              
replconninfo5 = 'localhost=192.168.4.101 localport=26001 localheartbeatport=26005 localservice=26004 remotehost=192.168.3.3 remoteport=26001 remoteheartbeatport=26005 remoteservice=26004'            
replconninfo6 = 'localhost=192.168.5.101 localport=26001 localheartbeatport=26005 localservice=26004 remotehost=192.168.3.3 remoteport=26001 remoteheartbeatport=26005 remoteservice=26004'  

4、配置主备切换优先级synchronous_standby_names

从架构图可以看出，几个机房的优先顺序是主用云>备用云>线控站，具体来说192.168.1.3>192.168.1.4>192.168.3.3>192.168.4.101(192.168.5.101) 也就是dn_6001>dn_6002>dn_6003>dn_6004。

这里的主备切换优先级需要参数synchronous_standby_names来控制。 参数说明: 潜在同步复制的备机名称列表，每个名称用逗号分隔。

FIRST N (node1,node2,…)表示在括号内按出现顺序的先后作为优先级选择前N个主机名称作为同步复制的备机名称列表。例如，FIRST 2 (node1,node2)表示选择node1作为同步复制的第一备机名称，node1作为同步复制的第二备机名称。

分别修改4台机器的postgresql.conf

192.168.1.3：
synchronous_standby_names = 'FIRST 2(dn_6002,dn_6003,dn_6004)'  # standby servers that provide sync rep
192.168.1.4：
synchronous_standby_names = 'FIRST 2(dn_6001,dn_6003,dn_6004)'  # standby servers that provide sync rep
192.168.3.3：
synchronous_standby_names = 'FIRST 2(dn_6001,dn_6002,dn_6004)'  # standby servers that provide sync rep
192.168.4.101(192.168.5.101)：
synchronous_standby_names = 'FIRST 2(dn_6001,dn_6002,dn_6003)'  # standby servers that provide sync rep

所有节点
local_bind_address = '0.0.0.0'
改成
local_bind_address = '*'
不然会出现备库down A网情况下，备库的gs_ctl query显示异常wait A网:26001 timeout expired

4、配置mogha

修改node.conf

zone1~3 用于定义机房，分别表示主用云，备用云，线控站, 不同机房配置独立虚拟IP,分别为192.168.3.30,192.168.1.30,192.168.4.100,192.168.5.100

# docs: https://docs.mogdb.io/zh/mogha/v2.3/overview
# 注意: 如果需要打开注释修改参数, 参数名前不能有空格

[config]
# 数据库端口
db_port=26000

# 数据库的操作系统用户, 通常为omm
db_user=omm

# 数据库的数据目录
db_datadir=/opt/mogdb/data

# 本地主库元数据存储路径
# primary_info=__INSTALLDIR__/primary_info

# 本地备库元数据存储路径
# standby_info=__INSTALLDIR__/standby_info

# 是否使用 lite 模式, 可选值: True / False
lite_mode=False

# HA节点之间心跳端口, 如果有防火墙, 需要配置互通
agent_port=8081

# 心跳间隔时间
heartbeat_interval=3

# 主库丢失的探测时间
primary_lost_timeout=5

# 主库的孤单时间
primary_lonely_timeout=5

# 双主确认超时时间
double_primary_timeout=5

# 本地元数据文件类型，支持 json/bin
meta_file_type=json

# 设置输出的日志格式
logger_format=%(asctime)s %(levelname)s [%(filename)s:%(lineno)d]: %(message)s

# [2.3.0新增]设置日志存储目录
# log_dir=__INSTALLDIR__

# [2.3.0新增] 日志文件最大字节数（接近该值时，将发生日志滚动）
# 支持的单位: KB, MB, GB (忽略大小写)
# log_max_size=512MB

# [2.3.0新增] 日志保留的文件个数
# log_backup_count=10

# 设置除了主备相关的机器, 允许可以访问到web接口的IP列表, 多个IP时逗号分隔
# allow_ips=

# [2.1新增] 主实例进程未启动时，是否需要 HA 进行拉起或切换
# 搭配 primary_down_handle_method 使用
# handle_down_primary=True

# [2.1新增] 备库进程未启动时，是否需要 HA 进行拉起
# handle_down_standby=True

# [2.1新增] 主库实例进程未启动时，如何处理
# 支持两种处理方式：
# - restart: 尝试重启，尝试次数在 restart_strategy 参数中设定
# - failover: 直接切换
primary_down_handle_method=restart

# [2.1新增] 重启实例最大尝试条件: times/minutes
# 例： 3/3 最多尝试3次或者3分钟, 任何一个条件先满足就不再尝试。
# [2.4.10更新] 调整默认值为 3/1, 重试次数最多3次]
# restart_strategy=3/1

# [2.2.1新增]
# debug_mode=False

# [2.3.0新增]
# HA节点间HTTP API 心跳请求超时时间(秒)
# http_req_timeout=2


# host1-9, 每个代表一个机器(最多支持1主8备)
# - ip: HA节点间通信IP
# - heartbeat_ips: (选填)HA节点间通信的冗余 ip, 允许配置多个, 以逗号隔开，
[host1]
ip=192.168.1.3

[host2]
ip=192.168.1.4

[host3]
ip=192.168.3.3

[host4]
ip=192.168.4.101
heartbeat_ips=192.168.5.101
replconn_ip=192.168.4.101,192.168.5.101


# zone1~3 用于定义机房, 不同机房配置独立虚拟IP
# - hosts: (必填) 本机房内机器列表, 填写机器在配置文件中对应的配置模块名 host1~9, 示例: host1,host2
# - ping_list: (必填) 用于检查网络是否通畅的仲裁节点, 例如网关, 支持填写多个IP (逗号分隔)
# - vip: (选填) 机房虚拟IP
# - vip_bind_nic: (选填) 虚拟IP要绑定的网卡名, 默认使用 host 配置中的 ip 的网卡 [2.4.0新增]
# - vip_netmask: (选填) 虚拟ip的子网掩码, 默认和 host 配置中 ip 同一网段 [2.4.0新增]
# - cascades: (选填) 机房内的级联机器列表 (配置方式同 hosts, 没有不填)
# - arping: (选填) 机房的 arping 地址, 切换虚拟IP后通知该地址
[zone1]
hosts=host1,host2
ping_list=192.168.1.6,192.168.3.2
cascades=
vip=192.168.1.30
vip_bind_nic=bond0
vip_netmask=255.255.255.0
arping=


[zone2]
hosts=host3
ping_list=192.168.1.6,192.168.3.2
cascades=
vip=192.168.3.30
vip_bind_nic=bond0
vip_netmask=255.255.255.0 
arping=

[zone3]
hosts=host4
ping_list=192.168.1.6,192.168.3.2
vip=192.168.4.100,192.168.5.100
vip_bind_nic=
vip_netmask=
cascades=
arping=

通过本文的介绍，我们了解了MogDB在双网卡同步方面的配置和最佳实践。MogDB 支持使用双网卡进行流复制，以确保主备数据库间的数据同步。双网卡配置在MogDB中用于流复制，可以显著提高数据同步的可靠性和系统的整体稳定性，尤其适合于对高可用性有严格要求的应用环境。

作者介绍：云和恩墨资深Oracle dba，有12年左右的金融、保险、政府、地税、运营商等业务关键型系统的运维经验，曾担任公司异常恢复东区接口人，负责紧急异常恢复工作，技术二线专家。目前负责PG、openGauss/MogDB运维、国产化MogDB数据库的推广工作 alt

本文由 mdnice 多平台发布

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/1615065.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

问题总结笔记

问题总结笔记

1.向量旋转 问题： 将一个向量旋转90 方法：旋转矩阵 FVector FrontDir EndMousePoint - Point; FrontDir.Normalize(); FVector Left FVector(-FrontDir.Y, FrontDir.X, 0); Verties.Add(Point Left * (WallWedith / 2)); Verties.Add(FVector(Vertie…
阅读更多...
告别数据丢失，轻松掌握文件自动备份秘籍

告别数据丢失，轻松掌握文件自动备份秘籍

在这个数字化高速发展的时代，我们的工作和生活都离不开电脑，而电脑中存储的文件和数据更是至关重要。然而，数据丢失的风险无处不在，可能因为硬件故障、软件崩溃、病毒攻击等原因而导致重要文件丢失。因此，文件自动备份…
阅读更多...
漫谈HAMR硬盘的可靠性-2

漫谈HAMR硬盘的可靠性-2

很显然，HAMR已经成为业内用于提升HDD硬盘容量硬盘的技术手段。三家机械硬盘HDD厂商，希捷、西数、东芝都已对HAMR硬盘进行了十多年的研究，但只有希捷大胆押注HAMR。相反，东芝和西部数据在采用HAMR之前选择了能量辅助垂直磁记录&…
阅读更多...
iOS 在OC旧项目中使用Swift进行混编

iOS 在OC旧项目中使用Swift进行混编

iOS 在OC旧项目中使用Swift进行混编 1、创建桥接文件 ​ 第一次在Swift创建OC文件，或者第一次OC创建Swift时，xcode会提示桥接，Creat Bridging Header即可,这个文件用于Swift调用OC文件，与OC调用Swift无关。 2、在TARGETS中设置D…
阅读更多...
机器学习（三）之监督学习2

机器学习（三）之监督学习2

前言： 本专栏一直在更新机器学习的内容，欢迎点赞收藏哦！ 笔者水平有限，文中掺杂着自己的理解和感悟，如果有错误之处还请指出，可以在评论区一起探讨！ 1.支持向量机（Support Vector Ma…
阅读更多...
第22天：安全开发-PHP应用留言板功能超全局变量数据库操作第三方插件引用

第22天：安全开发-PHP应用留言板功能超全局变量数据库操作第三方插件引用

第二十二天 一、PHP留言板前后端功能实现 开发环境： DW PHPStorm PhpStudy Navicat Premium DW : HTML&JS&CSS开发 PHPStorm : 专业PHP开发IDE PhpStudy ：Apache MYSQL环境 Navicat Premium: 全能数据库管理工具 二、数据库创建&架…
阅读更多...
【Flutter】One or more plugins require a higher Android SDK version.

【Flutter】One or more plugins require a higher Android SDK version.

问题描述 项目里多个组件需要更高版本的Android SDK One or more plugins require a higher Android SDK version.解决方案： 报错提示requires Android SDK version 34 按提示修改android项目app里build.gradle的compileSdkVersion 为34 android {compileSdkVe…
阅读更多...
线程池 ThreadPoolExecutor 参数详解

线程池 ThreadPoolExecutor 参数详解

一、引言 提到 Java 线程池，就不得不说 ThreadPoolExecutor，它是 Java 并发包 java.util.concurrent 中的一个类，提供一个高效、稳定、灵活的线程池实现，用于实现多线程并发执行任务，提高应用程序的执行效率。 在《任…
阅读更多...
JVM与GC原理

JVM与GC原理

JVM运行流程 Java 虚拟机（Java Virtual Machine，JVM）是 Java 平台的核心组件之一，它是一个在实际硬件和操作系统上模拟运行 Java 字节码的虚拟计算机 Java 程序被执行的顺序通常包括以下几个步骤： 编辑（E…
阅读更多...
Midjourney 中文文档

Midjourney 中文文档

快速使用 学习如何在Discord上使用Midjourney Bot从简单的文本提示中创建自定义图像。 行为准则 不要表现出不良行为。不要使用我们的工具制作可能引起煽动，不安或引起争议的图像。这包括血腥和成人内容。尊重其他人和团队。 1：加入Discord 访问Midj…
阅读更多...
如何让AI生成自己喜欢的歌曲-AI音乐创作的正确方式 - 第507篇

如何让AI生成自己喜欢的歌曲-AI音乐创作的正确方式 - 第507篇

历史文章 AI音乐，8大变现方式——Suno：音乐版的ChatGPT - 第505篇 日赚800，利用淘宝/闲鱼进行AI音乐售卖实操 - 第506篇 导读 在使用AI生成音乐（AI写歌）的时候，你是不是有这样的困惑： &…
阅读更多...
Docker 部署网页版 vscode (code-server)

Docker 部署网页版 vscode (code-server)

什么是 code-server code-server 是一个基于 Visual Studio Code 的开源项目，它允许你通过 Web 浏览器来使用 Visual Studio Code 的编辑功能。这意味着你可以在任何设备上，只要有浏览器和网络连接，就可以访问和使用 Visual Studio Code&…
阅读更多...
如果备份了oradata文件，该如何还原Oracle数据呢？

如果备份了oradata文件，该如何还原Oracle数据呢？

程序员的公众号：源1024，获取更多资料，无加密无套路！ 最近整理了一波电子书籍资料，包含《Effective Java中文版 第2版》《深入JAVA虚拟机》，《重构改善既有代码设计》，《MySQL高性能-第3版》&…
阅读更多...
（mac）性能监控平台搭建JMeter+Grafana+Influxdb

（mac）性能监控平台搭建JMeter+Grafana+Influxdb

【实现原理】 通过influxdb数据库存储jmeter的结果，再通过grafana采集influxdb数据库数据，完成监控平台展示 一、时间序列数据InfluxDB 1.InfluxDB下载安装 官网下载 https://portal.influxdata.com/downloads/ 官网最新版： &#xff0…
阅读更多...
AI预测体彩排列3第2套算法实战化测试第1弹2024年4月22日第1次测试

AI预测体彩排列3第2套算法实战化测试第1弹2024年4月22日第1次测试

从今天开始，开始新一轮的测试，本轮测试，以6码为基础，同步测试杀号情况，争取杀至4-5码。经过计算，假如5码命中，即每期125注，投入250元，十期共计2500元，则命中率…
阅读更多...
06 JavaScript学习：语句

06 JavaScript学习：语句

JavaScript 语句是用来执行特定任务或操作的一组指令。它可以包括变量声明、条件语句、循环语句、函数调用等。JavaScript 语句以分号结尾，每个语句都会被解释器执行。 分号 ; 在JavaScript中，分号（;）用于表示语句的结束。尽管在…
阅读更多...
一款pdf工具

一款pdf工具

下载链接：点击跳转； 它是一个installer，下好它之后，把网断掉，然后双击它，他会默认安装在C盘，安装时，浏览器可能会有一个弹窗，直接关掉并进入任务管理器杀掉所有smallerp…
阅读更多...
漫谈HAMR硬盘的可靠性-1

漫谈HAMR硬盘的可靠性-1

随着云计算、AI应用、大数据分析等领域对存储需求的持续增长，HAMR技术正逐步引领HDD行业进入新的发展阶段。目前，业内已经有了基于HAMR技术的大容量硬盘，并计划在未来几年内进一步提高至40TB甚至更高容量。 希捷在之前财报中透露，…
阅读更多...
C语言结构体，枚举，联合

C语言结构体，枚举，联合

系列文章目录 第一章 C语言基础知识 第二章 C语言控制语句 第三章 C语言函数详解 第四章 C语言数组详解 第五章 C语言操作符详解 第六章 C语言指针详解 第七章 C语言结构体详解 第八章 详解数据在内存中的存储 第九章 C语言指针进阶 文章目录 1. 结构体 1.1 声明结构…
阅读更多...
xhEditor实现WORD粘贴图片自动上传

xhEditor实现WORD粘贴图片自动上传

1.下载示例： 从官网下载 http://www.ncmem.com/webapp/wordpaster/versions.aspx 从gitee中下载 https://gitee.com/xproer/wordpaster-php-xheditor1x 2.将插件目录复制到项目中 3.引入插件文件 定义插件图标 初始化插件，在工具栏中添加插件按钮 效果…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023