postgresql standby启动流程分析

news2024/11/24 4:45:15

 

  • 专栏内容:postgresql内核源码分析
  • 个人主页:我的主页
  • 座右铭:天行健,君子以自强不息;地势坤,君子以厚德载物.

目录

前言

概述

原理机制

关键流程

备节点启动

walreceiver启动的时机

结尾


前言

本文是基于postgresql 15的代码进行分析解读,演示是在centos8系统上进行。


概述

hot-standby模式是postgresql提供的一种高可用方案,可以通过一主一备,或一主多备,以及一主多级级联备来达到数据和业务的高可用,备节点也可以进行只读业务,所以对只读业务的性能也会有很好的提升。

通过hot-standby模式也可以搭建容灾部署,达到多地多中心的效果。

原理机制

先来看下hot-standby如何搭建,要经过以下步骤:

(1)当然主节点要设置wal_level,pg_hba中设置访问权限,walsender要和备节点数量有关;

(2)通过pg_basebackup备份主节点的当前数据,此份数据就可以作为备节点启动,参数控制单独生成wal还是放在数据目录,带有-R时还会生成recovery信息;

(3)备节点设置standby=on,同时设置主节点的连接访问信息;这个可以在pg_basebackup时通过参数一次性搞定;

(4)启动备节点,此时主节点修改的数据就在备节点上看到。

那么,这是如何实现的呢?

我们通过以下原理介绍来回答这些问题。

我们查看主备后台进程,会发现几个平常看不到的进程信息

[senllang@localhost cbase]$ ps -ef|grep postgres

senllang   1440923       1  0 Apr23 ?        00:00:00 /opt/postgres/bin/postgres -D pgtest -p 8889

senllang   1440924 1440923  0 Apr23 ?        00:00:10 postgres: checkpointer

senllang   1440925 1440923  0 Apr23 ?        00:00:28 postgres: background writer

senllang   1441187 1440923  0 Apr23 ?        00:00:05 postgres: walwriter

senllang   1441188 1440923  0 Apr23 ?        00:00:00 postgres: autovacuum launcher

senllang   1441189 1440923  0 Apr23 ?        00:00:00 postgres: logical replication launcher

senllang   1441398       1  0 Apr23 ?        00:00:00 /opt/postgres/bin/postgres -D standby  -p 8888

senllang   1441399 1441398  0 Apr23 ?        00:00:16 postgres: checkpointer

senllang   1441400 1441398  0 Apr23 ?        00:00:21 postgres: background writer

senllang   1441401 1441398  0 Apr23 ?        00:06:38 postgres: startup recovering 00000002000000060000001C

senllang   1531801 3811240  0 Apr24 pts/3    00:00:00 /opt/postgres/bin/psql -d postgres -p 8889 -h 127.0.0.1

senllang   1531920 1441398  0 Apr24 ?        00:00:02 postgres: walreceiver streaming 6/1C48E758

senllang   1531922 1440923  0 Apr24 ?        00:00:01 postgres: walsender senllang 127.0.0.1(49266) streaming 6/1C48E758

主节点的端口为8889,对应的postmaster进程号为1440923  ,主节点下多了一个walsender 进程;

备节点的端口号为8888,对应的postmaster进程号为1441398  ,备节点下有两个进程startup ,walreceiver 显示在处理wal;

大家此时可以猜到主节点的变化是通过walsender发送到备节点的walreiver,然后由startup进程进行recovering,也就是redo,这样就可以在备节点看到和主节点一样的变化了。

主要流程如下图所示:

关键流程

  • 备节点启动

standby模式启动的条件,

首先看standby.signal;

其次检查数据备份状态,有两种情况下认为是可以的;

1、有label文件的话就可以启用;

2、如果有recovery.signal,同时control文件中,数据有备份状态或者是正常停止状态的就可以启用;

  • walreceiver启动的时机

walreceiver是备节点在以standby启动后,从WAL源读取WAL时,首次会给postmaster发信号启动receiver。

walreceive进程启动详细流程:

(1)在启动时调用流程

如果是备节点启动,在startup中会请求启动walreceiver,调用关系为

StartupXLOG

->PerformWalRecovery

->ReadRecord

->XLogPrefetcherReadRecord

->lrq_complete_lsn

->lrq_prefetch

->XLogPrefetcherNextBlock

->XLogReadAhead

->XLogDecodeNextRecord

->ReadPageInternal

->XLogPageRead

->WaitForWALToBecomeAvailable

在WaitForWALToBecomeAvailable会选择恢复的来源,当恢复来源为XLOG_FROM_STREAM时,会检查walreceive以及主节点的连接信息,然后向postmaster发送启动walreceive的信号。

lrq_*提供了一组函数处理LsnReadQueue,在读取WAL完成WAL的加载获取。

(2)postmaster在信号处理时,设置启动标志,在serverloop时启动进程;


结尾

作者邮箱:study@senllang.onaliyun.com
如有错误或者疏漏欢迎指出,互相学习。

注:未经同意,不得转载!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/499918.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

网络协议与攻击模拟-07-TCP连接-三次握手

传输层协议 1.TCP 2.UDP TCP 协议 回顾内容 1.传输层功能:定义应用层协议数据报文的端口号,流量控制 2.对原始数据进行分段处理 传输层所提供服务 1.传输连接服务 2.数据传输服务:流量控制…

基于条纹投影的物体三维形貌测量理论与仿真实验-含Matlab代码

▒▒本文目录▒▒ ✳️ 一、引言✳️ 二、条纹投影原理✳️ 2.1 相移轮廓术✳️ 2.2 傅里叶变换轮廓术 ✳️ 三、仿真分析✳️ 3.1 傅里叶变换轮廓术仿真实验✳️ 3.1.1 Matlab代码获取 ✳️ 3.2 相移轮廓术仿真实验✳️ 3.2.1 Matlab代码获取 ✳️ 参考文献 ✳️ 一、引言 基…

玩转axios, 我行你行吗

一.axios是什么? Axios是一个基于Promise网络请求库,作用于node.js和浏览器中, 它是 isomorphic 的(即同一套代码可以运行在浏览器和node.js中)。 在服务端它使用原生node.js http模块,而在客户端(浏览端)则使用XMLHttpRequests。 二.特性 1.从浏览器创…

SpringCloud:微服务保护之流量控制

雪崩问题虽然有四种方案,但是限流是避免服务因突发的流量而发生故障,是对微服务雪崩问题的预防。我们先介绍这种模式。 1.簇点链路 当请求进入微服务时,首先会访问DispatcherServlet,然后进入Controller、Service、Mapper&#…

c++ static修饰类的成员

静态成员就是成员变量和成员函数前面加上static,称为静态成员 1.static修饰成员变量 (1)所有对象共享static成员变量,一旦一个对象数据对其进行改动,所有对象调用其数据也会改变,一改全改。 (2)编译阶段分配内存,static成员变量…

定积分比较大小的常用手段。

1.常用手段 ①区间对称&#xff0c;利用被积函数奇偶性 ②放缩(利用常用不等式,结论等) ③将 1 转换成定积分 ④直接算 ⑤“拆区间&#xff0c;变量代换改区间再合并” 2.常用不等式 1.基本不等式 sinx < x < tanx (0 , Π/2) (几何或者夹逼证明) ex > 1 x (-∞&a…

【数据结构】set 与 map

目录 一、关联式容器 二、set 1、set的介绍 2、set的模板参数列表 3、set的构造 4、set的迭代器 5、set的容量 6、set修改操作 7、set 与 multiset 三、map 1、map的介绍 2、map的模板参数列表 3、map的构造 4、map的迭代器 5、map的容量与元素访问 6、map中元素…

代码随想录算法训练营第五十三天| 1143.最长公共子序列 、1035.不相交的线、53. 最大子序和 动态规划

文章目录 1143.最长公共子序列:star:1035.不相交的线53. 最大子序和 动态规划 1143.最长公共子序列⭐️ 题目链接&#xff1a;代码随想录 解题思路&#xff1a; 1.dp数组&#xff1a;长度为[0, i - 1]的字符串text1与长度为[0, j - 1]的字符串text2的最长公共子序列为dp(i)[j]…

记录一次从exe到python源码

找到要解析源码的exe&#xff0c;用7zip解压出来&#xff0c;可以看到打包前的目录&#xff08;这里并不是所有的exe都可以&#xff09;。 如下图所示&#xff0c;由于这个是一个前后端打包的exe&#xff0c;这里的server是后端的服务&#xff0c;resources是前端&#xff0c;这…

【现代机器人学】学习笔记十二:轮式移动机器人

这一章讲移动机器人相关的内容。许久没有更新了&#xff0c;有人私聊我是不是烂尾了。写的这几篇屁文我本来是拿来当自己的笔记本的&#xff0c;不以为有人会认真看。没想到居然还有人追&#xff0c;真是受宠若惊。在这里深表感谢&#xff01;一直没更新其实是因为年后的工作实…

优惠卷秒杀功能、全局唯一ID、乐观锁解决超卖问题、悲观锁实现一人一单、集群下锁失效问题

文章目录 1 全局唯一ID的需求分析2 Redis实现全局唯一Id3 添加优惠卷4 实现秒杀下单5 库存超卖问题分析6 乐观锁解决超卖问题6 悲观锁实现一人一单7 集群环境下的并发问题 1 全局唯一ID的需求分析 每个店铺都可以发布优惠券&#xff1a; 当用户抢购时&#xff0c;就会生成订单…

ASP.NET Core MVC 从入门到精通之序列化

随着技术的发展&#xff0c;ASP.NET Core MVC也推出了好长时间&#xff0c;经过不断的版本更新迭代&#xff0c;已经越来越完善&#xff0c;本系列文章主要讲解ASP.NET Core MVC开发B/S系统过程中所涉及到的相关内容&#xff0c;适用于初学者&#xff0c;在校毕业生&#xff0c…

Springboot +Flowable,任务认领和回退(三)

一.简介 有的时候&#xff0c;一个任务节点会存在多个候选人&#xff0c;例如&#xff1a;张三提交一个任务&#xff0c;这个任务即可以由李四处理&#xff0c;又可以由王五处理&#xff0c;那么针对这种多个任务候选人的情况&#xff0c;该如何处理&#xff1f; 二.绘制流程…

并发编程05:Java内存模型之JMM

文章目录 5.1 先从大场面试开始5.2 计算机硬件存储体系5.3 Java内存模型Java Memory Model5.4 JMM规范下三大特性5.5 JMM规范下多线程对变量的读写过程5.6 JMM规范下多线程先行发生原则之happens-before5.6.1 x,y案例说明5.6.2 先行并发原则说明5.6.3 happens-before总原则5.6.…

【面试题】面试官:说说你对MySQL的了解

文章目录 基础篇非关系型数据库和关系型数据库的区别&#xff1f;MySQL 数据库两种存储引擎的区别? 索引篇为什么索引能提高查询速度?聚集索引和非聚集索引的区别&#xff1f;非聚集索引一定回表查询吗?索引这么多优点&#xff0c;为什么不对表中的每一个列创建一个索引呢&a…

八岁都能懂:BFS判断一个图是二分图

目录 1 什么是二分图2 进入情境3 代码实现4 BFS是什么&#xff1f; 1 什么是二分图 一个图用两种颜色涂&#xff08;橙黄和橘绿&#xff09;&#xff0c;相邻节点不能同色&#xff0c;如下图&#xff0c;4与5相邻且同色&#xff0c;所以不是二分图。 2 进入情境 第一版&#xf…

微服务高频面试题

1、Spring Cloud 5大组件有哪些&#xff1f; 早期我们一般认为的Spring Cloud五大组件是 Eureka : 注册中心Ribbon : 负载均衡Feign : 远程调用Hystrix : 服务熔断Zuul/Gateway : 网关 随着SpringCloudAlibba在国内兴起 , 我们项目中使用了一些阿里巴巴的组件 注册中心/配置…

【论文】SimCLS:摘要总结的对比学习(2)

SimCLS:摘要总结的对比学习(1&#xff09; 写在最前面2 抽象总结的对比学习框架 写在最前面 SimCLS: A Simple Framework for Contrastive Learning of Abstractive Summarization&#xff08;2021ACL会议&#xff09; https://arxiv.org/abs/2106.01890 论文&#xff1a;htt…

HTTP第四讲——域名和DNS

IP 协议的职责是“网际互连”&#xff0c;它在 MAC 层之上&#xff0c;使用 IP 地址把 MAC 编号转换成了四位数字&#xff0c;这就对物理网卡的 MAC 地址做了一层抽象&#xff0c;发展出了许多的“新玩法”。 例如&#xff0c;分为 A、B、C、D、E 五种类型&#xff0c;公有地址…

[GFCTF 2021] day2

Baby_Web 查看源码发现 <!--源码藏在上层目录xxx.php.txt里面&#xff0c;但你怎么才能看到它呢?--> 然后抓包看中间件&#xff0c;Apache/2.4.49 (Unix) 存在目录穿越漏洞 curl http://node4.anna.nssctf.cn:28805/cgi-bin/.%2e/.%2e/.%2e/.%2e/var/www/index …