读写分离导致读不到刚插入的数据

news2025/1/18 16:52:26

背景

前两天在做一个功能的时候,需要先插表,如果数据重复则从数据库中查询出这条数据,这段代码在测试环境并没有什么问题,但是到生产之后就会偶现的报一些错,就是读不到已插入的数据,导致后续业务出现问题。

问题排查

查询日志发现,插入是成功的,显示update的条数为1,但是紧跟着的查询却显示total为0,这意味着没有查询到那条数据,于是排查了一下查询条件,也没有什么问题。

利用先进生产力

​ 最开始想的是会不会是因为事务的提交问题,因为从提交事务到数据入库,中间有没有可能有一个时间差,导致数据没有查询到,于是尝试着在CahtGpt和文心一言上查询了一下,得到如下答案

CahtGpt:

请添加图片描述
请添加图片描述
请添加图片描述
请添加图片描述

请添加图片描述
请添加图片描述

请添加图片描述

文心一言:

请添加图片描述

请添加图片描述

请添加图片描述

可以发现在这几个问题的回答上ChatGpt要比文心一言要强上很多,这样一比文心一言依旧是人工智障的水平

排除事务的可能性

根据ChatGpt的描述 ,如果使用了异步事务是可能会出现事务提交后再查询就查询不出来的情况,或者使用了try catch,

ChatGpt给出的建议是

  1. 将查询方法和写方法并入到一个事务中,这样就可以保证能查询的出来。不过将查询语句方法放入整体事务会影响事务的效率。
  2. 修改事务的隔离级别,Mysql默认的事务隔离级别是读已提交,如果我把这个写事务的隔离级别修改为读未提交,则可以读取到数据。不过这种方法很明显不符合常理,也会产生脏读、幻读、不可重复读等问题

不过这些情况都不符合我的实际情况,我没有使用异步事务,也没有进行try catch,因此不是这些原因导致的。事务是肯定提交了的,于是我思索了很久,突然想到了我们的数据库是做了读写分离的

找到问题

我们的数据库使用的是阿里的PolarDB集群。默认是做了读写分离的,因此我怀疑是在数据写入写库的时候,还没来得及同步到读库,我就快速的去查询了读库,导致没有读取到那条数据,于是我翻阅了一下阿里云的 云原生数据库 PolarDB MySQL版 的文档,发现了一些端倪

请添加图片描述

官方文档上就对读不到刚插入的数据这一情况做了专门的解释,就是根据一致性级别的配置不同,不一定保证能够马上读到刚插入的数据。

而官方也列举了解决方案,即在读SQL前加上/* FORCE_MASTER */来让这个读操作强行走写库,这样的话就能查询到刚插入的数据,如下

请添加图片描述

我也询问了DBA,DBA也验证了我所说的情况是存在的

  • 最好的方式是在查询的sql前面加 /* FORCE_MASTER */ 让它路由到只查询主库
  • 如果插入与查询是写在一个事务里面的:先insert 后再去select 的话就不用加强制路由
  • 如果这个事务是先select再insert的话,这个事务在mysql这边会进行事务拆分,先select的查询会走到只读实例,其他后面的dml操作会走到主节点

结论

这次问题就是因为读写分离导致的读不到刚插入的数据,所以直接让读操作强行去写库读取数据就可以避免读取不到的问题

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/422745.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

超详细Django+vue+vscode前后端分离搭建

文章目录一、Django后端搭建1.1 创建项目和app1.2 注册app1.3 运行项目1.4 配置mysql数据库1.5 创建数据库类1.6 使用Django后台进行数据管理2、Django rest framework配置2.1 序列化2.2 添加视图2.3 添加路由2.4 在项目根目录下的urls中加入如下代码2.5 api测试2.6 筛选和搜索…

BGP协议解析(白话版)

之前一直没搞明白BGP有啥用,加了跟没加没啥区别,专门查资料写了这篇《BGP协议解析》。 下面使用eNSP模拟器演示! IBGP与EBGP的区别 BGP分为两种:IBGP与EBGP。 两个路由器的BGP号相同,建立邻居关系叫IBGP&#xff0…

树莓派连接串口时无法开机

树莓派连接串口时无法开机我的情况我的思考我的解决过程重点参考我的情况 因为项目需要,因此需要使用树莓派控制电机,而电机是一上电就会给树莓派发送数据,而这时树莓派还正处于开机时,结果就是开机失败。当将串口断开时就又可以…

PHP快速入门05-时间日期与时区,附30个常用案例

文章目录前言一、时间日期与时区1.1 时间与日期1.2 时区二、 30个日期时间函数的用法示例2.1 获取当前的时间戳2.2 将时间戳格式化为日期时间2.3 获取当前的日期2.4 获取当前的时间2.5 获取当前年份2.6 获取当前月份2.7 获取当前日期的第几天2.8 计算两个日期之间的天数差2.9 计…

央媒报道的长与短

传媒如春雨,润物细无声,大家好,我是51媒体 胡老师。 在最近的媒体服务中,遇到一个问题,与大家讨论下,很多媒体特别是央媒,在活动报道中不会完全按照新闻稿通稿的内容去报道,有的会根…

MQ选型,kafka、RocketMQ、RabbitMQ、ActiveMQ

MQ(Message Queue),是基础数据结构中“先进先出”的一种数据结构。指把要传输的数据(消息)放在队列中,用队列机制来实现消息传递——生产者产生消息并把消息放入队列,然后由消费者去处理。消费者…

java SimpleDateFormat和Calendar日期类

目录一、SimpleDateFormat使用二、Calendar使用一、SimpleDateFormat使用 使用Date直接输出日期时,是使用系统默认的格式输出,所以需要使用SimpleDateFormat来格式化日期。 那么SimpleDateFormat类怎么使用呢,我们需要先了解此类的格式化符号…

Codeforces Round 866 (Div. 2) 题解

目录 A. Yuras New Name(构造) 思路: 代码: B. JoJos Incredible Adventures(构造) 思路: 代码: C. Constructive Problem(思维) 思路: 代…

一、计算机的发展历史

一、计算机的发展历史 第一台现代计算机 ENIAC:世界上第一台现代通用电子数字计算机,诞生于1946年2月14日的美国宾夕法尼亚大学。研制电子计算机的想法产生于第二次世界大战进行期间。当时激战正酣,各国的武器装备还很差,占主要地…

Java垃圾收集原理

程序计数器、虚拟机栈、本地方法栈这三个区域随线程而灭,栈中栈帧的内存大小也是在确定的。这几个区域的内存分配和回收都具有确定性,因此不需要过多考虑如何回收。 Java堆和方法区这两个区域有着很显著的不确定性 一个接口的实现类需要的内存可能不一…

软考第七章 下一代互联网

下一代互联网 1.IPv6 IPv4的缺陷: 网络地址短缺路由速度慢,IPv4头部多达13个字段,路由器处理的信息量很大缺乏安全功能不支持新的业务模式 关于PIv6的研究成果都包含在1998年12月发表的RFC 2460文档中 1.1 IPv6分组格式 版本&#xff1a…

量子退火Python实战(3):投资组合优化(Portfolio) MathorCup2023特供PyQUBO教程

文章目录前言一、什么是投资组合优化?二、投资组合优化建模1. 目标函数:回报2.约束函数:风险3.最终优化目标函数三、基于PyQUBO实现1. 获取数据2. 数据处理3. 目标函数PyQUBO实现4. OpenJij实施优化总结前言 提示:包含pyQUBO用法…

硬件语言Verilog HDL牛客刷题day11 A里部分 和 Z兴部分

1.VL72 全加器 1.题目: ① 请用题目提供的半加器实现全加器电路① 半加器的参考代码如下,可在答案中添加并例化此代码。 2. 解题思路 (可以看代码) 2.1 先看 半加器 s 是加位 , C 是进位。 2.2 再看全加器 …

2023年新手如何选择云服务器配置来部署自己的网站?

现在做网站的人越来越少了,没有以前那种百万网站站长的势头。但是,不论个人站长还是企业,只要网上开展业务其实都会需要自己网站或小程序、APP等平台。如今,很少有人使用虚拟主机,但是独立服务器成本高,一般…

【2023】Kubernetes-网络原理

目录kubernetes网络模型kubernetes网络实现容器到容器之间通信Pod之间的通信Pod到Service之间的通信集群内部与外部组件之间的通信开源容器网络方案FlannelCalicokubernetes网络模型 Kubernetes网络模型设计的一个基础原则是:每个Pod都拥有一个独立的IP地址&#x…

异地远程访问本地SQL Server数据库【无公网IP内网穿透】

文章目录1.前言2.本地安装和设置SQL Server2.1 SQL Server下载2.2 SQL Server本地连接测试2.3 Cpolar内网穿透的下载和安装2.3 Cpolar内网穿透的注册3.本地网页发布3.1 Cpolar云端设置3.2 Cpolar本地设置4.公网访问测试5.结语转发自CSDN远程穿透的文章:无需公网IP&a…

哪吒探针 - Windows 和Linux端agent安装(详细注意版)

一、Windows端agent安装配置 环境准备 环境: Windows 服务器软件:哪吒探针点击下载、nssm 点击下载(探针agent和nssm都要下载准备好) 设置环境变量下载软件后,解压到任意位置,然后按 winR 打开运行窗口,输入 sysdm.cpl 打开系统属性–>高级…

基于GIS/SCADA的智慧燃气数字孪生Web3D可视化系统

在低碳经济快速发展的今天,天然气在我国能源结构的占比逐年提高,安全供气成为关乎民生福祉、经济发展和社会和谐的大事。 自我国开展燃气铺设以来,经过长期运营的家用燃气和工业燃气设备管道设施设备基础差、检维修难度大,且传统燃…

[Java Web]会话跟踪技术

⭐作者介绍:大二本科网络工程专业在读,持续学习Java,努力输出优质文章 ⭐作者主页:逐梦苍穹 ⭐所属专栏:Java Web 目录1、会话跟踪技术概述2、数据共享3、Cookie4、Session5、Cookie和Session的区别6、总结1、会话跟踪…

大数据应用——Hadoop运行模式(伪分布式运行)

4.2 伪分布式运行模式4.2.1 启动HDFS并运行MapReduce程序1. 分析 (1)配置集群(2)启动、测试集群增、删、查没有改(多台机子麻烦)(3)执行WordCount案例2. 执行步骤(1&…