Redis7--基础篇3(持久化)

news2024/11/25 5:29:30

持久化介绍

在这里插入图片描述
官网地址:
https://redis.io/docs/manual/persistence

  • RDB(Redis DataBase)
  • AOF(Append Only File)
  • RDB + AOF
    在这里插入图片描述

RDB模式(Redis DataBase)

在这里插入图片描述
RDB 持久性以指定的时间间隔执行数据集的时间点快照。
实现类似照片记录效果的方式,就是把某一时刻的数据和状态以文件的形式写到磁盘上,也就是
快照。这样一来即使故障宕机,快照文件也不会丢失,数据的可靠性也就得到了保证。
这个快照文件就称为RDB文件(dump.rdb),其中,RDB就是Redis DataBase的缩写。

在指定的时间间隔内将内存中的数据集快照写入磁盘也就是行话讲的Snapshot内存快照,它恢复时再将硬盘快照文件直接读回到内存里。

redis.conf配置文件

  • 6.0.16版本以下
    在这里插入图片描述
    在这里插入图片描述

  • 6.2以及7.0版本
    在这里插入图片描述

开启备份

1.修改配置文件

在这里插入图片描述
5秒或2次

2. 定义dump文件保存路径

在这里插入图片描述

3. 定义dump文件名称

在这里插入图片描述

测试

在这里插入图片描述
在这里插入图片描述

恢复备份

1. 将备份文件移动到redis安装目录并启动服务

flushall、flushdb命令也会产生备份文件
物理恢复,服务、备份需要分机隔离,防止硬盘损坏后备份文件也丢失。

手动触发备份

redis提供了两个命令来生成RDB文件, savebgsave
在这里插入图片描述

save

会阻塞当前redis服务器,知道持久化工作完成,在执行save命令期间,redis不能处理其他命令,生产禁止使用

在这里插入图片描述

bgsave

在这里插入图片描述

redis会在后台异步进行快照操作,不阻塞,在进行快照同时还能响应客户端请求,该触发方式会fork一个子进程,由子进程复制持久化过程。
Redis会使用bgsave对当前内存中的所有数据做快照,这个操作是子进程在后台完成的,这就允许主进程同时可以修改数据。

在这里插入图片描述

劣势

在这里插入图片描述

在备份间隔期间redis意外down调的话,会丢失当前至最新一次快照的数据。
内存数据全量同步,如果数据量太大会造成占用大量I/O,影响服务器性能。
RDB依赖于主进程的fork,在更大的数据集中,这可能导致服务的请求的瞬间延迟,fork的时候内存中的数据被克隆了一份,需要考虑容量。

如何检修dump.rdb文件

在这里插入图片描述

触发RDB快照的情况

  • 配置文件中默认的快照配置
  • 执行save、bgsave命令
  • 执行flushdb、flushall命令,但是生成的dump.rdb文件是空的,没有意义。
  • 属性shutdown并且没有设置开启AOF持久化
  • 主从复制,主节点自动触发

禁用快照

  • 启动服务时输入相关参数

    redis -cli config set save ""
    
  • 修改配置文件
    在这里插入图片描述

RDB模式相关配置参数详解

  • save <seconds> <changes> 快照的频率

  • dbfilename 快照文件的名称

  • dir 快照文件的目录

  • stop-writes-on-bgsave-error
    默认yes
    如果配置成no,表示你不在乎数据不一致或者有其他的手段发现和控制这种不一致,那么在快照写入失败时,
    也能确保redis继续接受新的写请求
    在这里插入图片描述

  • rdbcompression
    在这里插入图片描述
    默认yes
    对于存储到磁盘中的快照,可以设置是否进行压缩存储。如果是的话,redis会采用LZF算法进行压缩。
    如果你不想消耗CPU来进行压缩的话,可以设置为关闭此功能

  • rdbchecksum
    在这里插入图片描述
    默认yes
    在存储快照后,还可以让redis使用CRC64算法来进行数据校验,但是这样做会增加大约10%的性能消耗,如果希望获取到最大的性能提升,可以关闭此功能

  • rdb-del-sync-files
    在这里插入图片描述
    在没有持久性的情况下删除复制中使用的RDB文件启用。默认情况下no,此选项是禁用的。

小总结

在这里插入图片描述


AOF模式(Append Only File)

介绍

以日志的形式来记录每个写操作,将Redis执行过的所有写指令记录下来(读操作不记录),只许追加文件但不可以改写文件,redis启动之初会读取该文件重新构建数据,换言之,redis重启的话就根据日志文件的内容将写指令从前到后执行一次以完成数据的恢复工作。
默认情况下,redis是没有开启AOF的,如果开启的话需要修改配置文件。

配置AOF开启、AOF备份文件路径、AOF备份文件名

AOF持久化工作流程
在这里插入图片描述

1-Client作为命令的来源,会有多个源头以及源源不断的请求命令。
2-在这些命令到达Redis Server 以后并不是直接写入AOF文件,会将其这些命令先放入AOF缓存中进行保存。这里的AOF缓冲区实际上是内存中的一片区域,存在的目的是当这些命令达到一定量以后再写入磁盘,避免频繁的磁盘IO操作。
3-AOF缓冲会根据AOF缓冲区同步文件的三种写回策略将命令写入磁盘上的AOF文件。
4-随着写入AOF内容的增加为避免文件膨胀,会根据规则进行命令的合并(又称AOF重写),从而起到AOF文件压缩的目的。
5-当Redis Server 服务器重启的时候会从AOF文件载入数据。

AOF缓冲区三种写回策略

在这里插入图片描述

  • always
    同步写回,每个写命令执行完立刻同步的将日志写回磁盘
  • everysec
    每秒写回,每个写命令执行完,只是先把日志写到AOF文件内存缓冲区,每隔一秒把缓冲区的内容写入磁盘
  • no
    操作系统控制的写回,每个写命令执行完,只是先把日志写到AOF文件

在这里插入图片描述

AOF文件路径

redis6

AOF文件与RDB文件的位置一样,在此配置
在这里插入图片描述

redis7

在这里插入图片描述
在这里插入图片描述
最终保存路径为 dir+appenddirname

AOF文件名称

redis6

有且只有一个

在这里插入图片描述

redis7

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

恢复

正常恢复

  • 配置文件中 appendonly no 改为 appendonly yes
  • 重启服务

异常恢复

  • 重启服务会进入AOF文件的载入,如果AOF文件有问题,则无法启动
  • 异常修复命令:redis -check -aof --fix

优势

可紧急恢复、性能高、数据更不易丢失

劣势

对于相同的数据集来说,AOF文件要远大于RDB文件,恢复速度慢于RDB
AOF运行效率要慢于RDB,每秒同步策略较好

AOF重写机制

介绍

由于AOF持久化是Redis不断将写命令记录到 AOF 文件中,随着Redis不断的进行,AOF 的文件会越来越大,文件越大,占用服务器内存越大以及 AOF 恢复要求时间越长。为了解决这个问题,Redis新增了重写机制,当AOF文件的大小超过所设定的峰值时,Redis就会自动启动AOF文件的内容压缩,只保留可以恢复数据的最小指令集,或者可以手动使用命令 bgrewriteaof 来重新。

触发机制

在这里插入图片描述
注意 ,同时满足,且的关系才会触发。
1 根据上次重写后的aof大小,判断当前aof大小是不是增长了1倍
2 重写时满足的文件大小
3 满足配置文件中的配置项后,Redis会记录上次重写的AOF文件大小,默认配置是当AOF文件大小是上次write后大小的一倍且文件大于64MB时
4 可以执行bgrewriteof命令

总结

AOF文件重写并不是对原文件进行重新整理,而是直接读取服务器现有的键值对,然后用一条命令去代替之前记录这个键值对的多条命令,生成一个新的文件后去替换原来的AOF文件。

原理

1:在重写开始前,redis会创建一个“重写子进程”,这个子进程会读取现有的AOF文件,并将其包含的指令进行分析压缩并写入到一个临时文件中。
2:与此同时,主进程会将新接收到的写指令一边累积到内存缓冲区中,一边继续写入到原有的AOF文件中,这样做是保证原有的AOF文件的可用性,避免在重写过程中出现意外。
3:当“重写子进程”完成重写工作后,它会给父进程发一个信号,父进程收到信号后就会将内存中缓存的写指令追加到新AOF文件中
4:当追加结束后,redis就会用新AOF文件来代替旧AOF文件,之后再有新的写指令,就都会追加到新的AOF文件中
5:重写aof文件的操作,并没有读取旧的aof文件,而是将整个内存中的数据库内容用命令的方式重写了一个新的aof文件,这点和快照有点类似

配置项详细说明

在这里插入图片描述

小总结

在这里插入图片描述


RDB-AOF混合持久化模式

在同时开启RDB和AOF持久化时,重启只会加载AOF文件,不会加载RDB文件。
在这里插入图片描述

RDB+AOF混合方式
结合了RDB和AOF的优点,既能快速加载又能避免丢失过多的数据

开启混合方式设置

设置aof-use-rdb-preamble的值为 yes yes表示开启,设置为no表示禁用

先使用RDB进行快照存储,然后使用AOF持久化记录所有的写操作,当重写策略满足或手动触发重写的时候,将最新的数据存储为新的RDB记录。这样的话,重启服务的时候会从RDB和AOF两部分恢复数据,既保证了数据完整性,又提高了恢复数据的性能。简单来说:混合持久化方式产生的文件一部分是RDB格式,一部分是AOF格式。----》AOF包括了RDB头部+AOF混写
在这里插入图片描述


纯缓存模式

同时关闭RDB模式和AOF模式,但仍可以使用save、bgsave命令来生成rdb文件,用bgrewriteaof命令来生成aof文件。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1229779.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

Blender烘焙AO操作及对应的python代码

&#xff08;一&#xff09;Blender软件操作 1. 导入模型&#xff08;这里省略&#xff09; 2. 材质设置 模型使用的所有材质都需要删除Surface Shader&#xff0c;没有其他多余的计算&#xff0c;可以大量缩短烘焙时间。删除之后的只留下一个材质输出节点&#xff0c;如图所…

ubuntu从源码编译gdal

删除旧版本 sudo apt remove libgdal* sudo apt remove gdal* sudo apt autoremove下载proj和gdal https://github.com/OSGeo/PROJ/releases 这里使用的是9.3.0版本&#xff1a; https://github.com/OSGeo/gdal/releases 这里使用的是3.7.3版本&#xff1a; 编译 安装…

C#中.NET 7.0 Windows窗体应用通过EF访问已有数据库并实现追加、删除、修改、插入记录

目录 一、前言 1.Database.ExecuteSqlCommand 方法不被EF7.0支持 2.SET IDENTITY_INSERT Blog {ON,OFF}不起作用 3.主键和标识列分离&#xff0c;成功实现插入与修改 二、新建本文涉及的项目 三、程序设计 1.Form1.cs源码 2.Form1.cs[设计] 四、生成和测试 1.原始表 …

【论文阅读】SPARK:针对视觉跟踪的空间感知在线增量攻击

SPARK: Spatial-Aware Online Incremental Attack Against Visual Tracking introduction 在本文中&#xff0c;我们确定了视觉跟踪对抗性攻击的一个新任务&#xff1a;在线生成难以察觉的扰动&#xff0c;误导跟踪器沿着不正确的&#xff08;无目标攻击&#xff0c;UA&#x…

删除 word 中嵌入文字下方的图片

问题&#xff1a;Word中插入图片&#xff0c;选择图片格式【衬于文字下方】后&#xff0c;无法选择图片并删除。 解决方法&#xff1a; 如图所示&#xff0c;选择 【开始】-【编辑】-【选择】-【选择对象】&#xff0c;然后鼠标放在图片位置即可选中图片进行删除操作。

React中StrictMode严格模式,导致开发环境,接口会请求两次或多次( useEffect 请求多次)

问题描述&#xff1a; 我在用 create-react-app时&#xff0c;开发环境&#xff0c;一进页面接口会请求两次或多次。 我在首页 useEffect里 请求一个接口&#xff0c;整个页面就在这里请求这一次接口。但 实际上请求了两次。我检查了代码&#xff0c;确定只调用了一次&#xf…

算法进阶——链表中环的入口节点

题目 给一个长度为n链表&#xff0c;若其中包含环&#xff0c;请找出该链表的环的入口结点&#xff0c;否则&#xff0c;返回null。 数据范围&#xff1a;1<结点值<10000 要求&#xff1a;空间复杂度O(1)&#xff0c;时间复杂度O(n) 例如&#xff0c;输入{1,2},{3,4,5…

【文末送书】计算机网络 | IO多路转接技术 | poll/epoll详解

欢迎关注博主 Mindtechnist 或加入【Linux C/C/Python社区】一起学习和分享Linux、C、C、Python、Matlab&#xff0c;机器人运动控制、多机器人协作&#xff0c;智能优化算法&#xff0c;滤波估计、多传感器信息融合&#xff0c;机器学习&#xff0c;人工智能等相关领域的知识和…

麒麟KYLINOS2303系统上禁用新功能介绍页面

原文链接&#xff1a;麒麟KYLINOS2303系统上禁用新功能介绍页面 hello&#xff0c;大家好啊&#xff0c;今天给大家带来一篇在麒麟KYLINOS2303系统上禁用新功能介绍页面的文章&#xff0c;在我们安装完系统登录后&#xff0c;会发现有新功能介绍这个界面&#xff0c;我们可以通…

OpenCvSharp从入门到实践-(01)认识OpenCvSharp开发环境搭建

目录 一、OpenCV 二、OpenCvSharp 三、OpenCvSharp开发环境搭建 四、下载 五、其他 一、OpenCV OpenCV是基于Apache2.0许可&#xff08;开源&#xff09;发行的跨平台计算机视觉和机器学习函数库&#xff0c;支持Windows、Linux、Android和Mac OS操作系统。OpenCV由一系…

人工智能靠自学就行?

随着人工智能技术的飞速发展&#xff0c;这个领域的知识和技术对于很多人来说都充满了神秘和吸引力。很多人都想要学习人工智能&#xff0c;但是又不知道如何入手&#xff0c;是否需要参加培训机构或者跟着导师学习呢&#xff1f;今天&#xff0c;我想和大家分享一些关于自学人…

全流量分析应用运行和访问情况

在当今数字化时代&#xff0c;应用程序的运行和访问情况对于企业和组织来说至关重要。无论是在线销售平台、移动应用还是企业内部系统&#xff0c;应用的性能和可用性直接影响着用户体验、业务流程以及组织效率。因此&#xff0c;对应用的运行和访问情况进行全面分析和评估&…

[Kettle] 公式

公式是用来计算数据流中数据的表达式 公式可以是"AB"这样的简单计算&#xff0c;也可以是类似"if/then"复杂业务逻辑判断的表达式 数据源 2019年11月月考成绩(Kettle数据集16).xlshttps://download.csdn.net/download/Hudas/88553816?spm1001.2014.300…

【MySQL】细谈SQL高级查询

文章目录 一、前言 & 准备工作二、简易高级查询⚙ 准备工作1、查询每一门课程及其先修课程2、查询和“刘涛”在一个班级的学生的信息3、查询选修了‘计算机基础’课的学生的学号、姓名③ 连接方式④ 子查询嵌套方式 4、查询没有选修课程的学生的信息① 子查询in方式② 子查…

Python爬虫技术系列-03/4flask结合requests测试静态页面和动态页面抓取

python构建web服务 flask内容参考:Flask框架入门教程&#xff08;非常详细&#xff09; flask安装与运行测试 安装flask pip install flask创建一个webapp.py文件&#xff0c;内容如下 from flask import Flask# 用当前脚本名称实例化Flask对象&#xff0c;方便flask从该脚…

赠人玫瑰,手有余香,分享5款精致小巧的软件

​ 分享是一种美好的事情&#xff0c;它能让快乐变得更多&#xff0c;它能让悲伤变得更少&#xff0c;我会持续分享一些好用的软件给大家。 1.矢量图形设计——Affinity Designer ​ Affinity Designer是一款屡获殊荣的矢量图形设计软件&#xff0c;适用于 Windows、macOS 和…

wvp gb28181 pro 拉流代理功能

前言 不是所有的摄像机都支持国标或者推流的&#xff0c;但是这些设备可以得到一个视频播放地址&#xff0c;通常为rtsp协议&#xff0c; 以大华为例。可以得到这样一个流地址&#xff0c;可以直接用vlc进行播放&#xff0c;此时我们可以通过拉流代理功能将这个设备推送给其他国…

如何构建更简洁的前端架构?

目录 为什么需要前端架构&#xff1f; 那么&#xff0c;前端架构是什么样的呢&#xff1f; 使用了哪些层&#xff1f; 那么&#xff0c;这种架构会出什么问题呢&#xff1f; 我们应该如何避免这些错误&#xff1f; 哪些原则应适用于组件&#xff1f; Anti-Patterns 反模…

不会制作电子期刊怎么办?新发现

​电子期刊已经成为当今社会中非常流行的一种出版形式&#xff0c;它不仅方便快捷&#xff0c;而且易于分享和传播。如果你一直想尝试制作电子期刊&#xff0c;但又不知道如何开始&#xff0c;那么不用担心&#xff01;今天我将为你揭秘制作电子期刊的秘籍&#xff0c;让你轻松…

家电电器展示预约小程序的作用是什么

电器产品已经成为人们生活的必备品&#xff0c;如冰箱、电视机、洗衣机等&#xff0c;而这些产品的购买方式也很多&#xff0c;可以到线下门店购买&#xff0c;也可以到线上多个电商平台购买&#xff0c;如今互联网高速发展以及民众享受线上服务带来的便捷性&#xff0c;同时商…