Redis中的动态字符串(SDS)

news2024/11/27 22:26:21

动态字符串(Simple Dynamic String,SDS)

Redis是用C语言编写的。Redis中的简单动态字符串的设计与实现,兼顾了操作高效、能保存任意数据、以及节省内存的需求。Redis并且还兼容C语言的原生字符串API,从而提高了代码的复用度。

C语言字符串的一些缺点

  • 获取字符串长度需要自己计算或者调用api(例如调用strlen方法)
  • 非二进制安全(C的字符串结束标识符为’\0’,无法完整表示图片、音视频等数据)
  • 缓冲溢出(C的数组不会检查自己的空间是否足够)
  • 多次内存重分配

Redis中的简单字符串

在这里插入图片描述

例如,我存储一个字符串name,存储结构如下

在这里插入图片描述

其中,SDS类型指结构头类型,有以下几个

#define SDS_TYPE_5  0
#define SDS_TYPE_8  1
#define SDS_TYPE_16 2
#define SDS_TYPE_32 3
#define SDS_TYPE_64 4

采用额外的元数据来维护字符数组

Redis对C的字符串的扩展,就是在原有的基础上增加了增加了(字符数组长度)len和(分配空间大小)alloc等元数据。这样一来,需要基于字符串长度进行的追加、复制、比较等操作,就可以直接读取元数据,效率也就提升了。

设计不同的结构头

为什么要设计不同的结构头?当我们存储一些小的字符串比如’name’,'user’这些非常小的字符串,根本没必要去用int64这么大的空间去存储,否则有可能结构体定义比本身数据还要占内存。所以,为了更好的管理内存空间,Redis设计了结构头,定义了 sdshdr5(已弃用),sdshdr8,sdshdr16,sdshdr32,sdshdr64五种SDS类型,分别表示该结构体存储的字节大小。比如sdshdr8,它最大长度可存2^8(包括结束符)。
下面看看其中一个SDS结构体

struct __attribute__ ((__packed__)) sdshdr8 {
    uint8_t len; /* 字符数组现有长度*/
    uint8_t alloc; /* 字符数组的已分配空间,不包括结构体和\0结束字符*/
    unsigned char flags; /* SDS类型*/
    char buf[]; /*字符数组*/
};

采用紧凑内存分配

Redis还采用了__attribute__ ((packed))属性定义结构体,这样一来,结构体实际占用多少内存空间,编译器就分配多少空间。
举个例子,设我定义了一个结构体 s1,它有两个成员变量,类型分别是 char 和 int,如下所示:

 #include <stdio.h>
  int main() {
     struct s1 {
        char a;
        int b;
     } ts1;
     printf("%lu\n", sizeof(ts1));
     return 0;
  }

虽然 char 类型占用 1 个字节,int 类型占用 4 个字节,但是如果你运行这段代码,就会发现打印出来的结果是 8。这就是因为在默认情况下,编译器会给 s1 结构体分配 8 个字节的空间,而这样其中就有 3 个字节被浪费掉了。
比如,我用__attribute__ ((packed))属性定义结构体 s2,同样包含 char 和 int 两个类型的成员变量,如下所示:

 #include <stdio.h>
  int main() {
     struct __attribute__((packed)) s2{
        char a;
        int b;
     } ts2;
     printf("%lu\n", sizeof(ts2));
     return 0;
  }

当你运行这段代码时,你可以看到,打印的结果是 5,表示编译器用了紧凑型内存分配,s2 结构体只占用 5 个字节的空间。

字符串动态扩容

SDS之所以叫做动态字符串,是因为它具备动态扩容的能力,例如一个内容为"hi"的SDS:

在这里插入图片描述

假如我们要给SDS追加一段字符串",nihao",这里就会先申请新内存空间

  • 如果字符串长度小于1M,则新空间为扩展后字符串的长度的两倍 + 1
  • 如果新字符串大于1M,则新空间为扩展后字符串长度+1M +1。称为内存预分配,减少内存分配次数。

在这里插入图片描述

为什么要如此?

这是为了减少内存的重分配,这里涉及到系统调用,申请空间是十分耗时的操作,所以Redis采用了内存预分配机制提高性能。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/598024.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

【MTGCD-Net】Detecting Building Changes with Off-Nadir Aerial Images

目录 1.背景 2.网络总体结构 2.1中间辅助任务预测 2.2多任务特征引导模块

【Android】Binder(二)内存划分和Binder实现一次拷贝

MMAP介绍 在 Android 中&#xff0c;Binder 通信机制中使用了 mmap&#xff08;Memory Map&#xff09;技术&#xff0c;用于实现进程间的共享内存。mmap 是一种内存映射文件的方式&#xff0c;可以将一个文件或者设备映射到进程地址空间的一段连续的地址区域中&#xff0c;这…

运维小白必学篇之基础篇第三集:文件管理相关命令实验

文件管理相关命令实验 实验者&#xff1a;胡 阳 上午练习题&#xff1a; 1、创建1.txt文件&#xff0c;文件大小为350m 2、使用echo为文件2.txt写入内容hello&#xff0c;world 3、查看文件2.txt文件的内容 4、为2.txt文件追加写入nihao 5、实时查看2.txt的变化&#xff0c;可…

低代码平台:高效构建供应商信息管理系统的利器

随着数字化时代的来临&#xff0c;企业对于应用系统的需求也越来越高&#xff0c;但同时传统的软件开发方式有很多弊端&#xff0c;比如需要大量的开发人员、开发周期长、维护成本高等&#xff0c;这就导致了低代码平台的兴起。低代码平台是一种适用于企业快速构建应用程序的工…

紫光同创开发板使用教程(一):debug用法

我们这里通过debug抓一个普通led工程的部分信号 下面是代码&#xff0c;输入差分200M 1.整体代码 timescale 1ns / 1ps module led_test( //Differential system clockssys_clk_p,//200Msys_clk_n, rst_n, //S1 led );input sys…

农业度“伏”黑科技——农业气象站

最近气象预警 非常高能 总是一波跟着一波 高温、雨水接连不断 高热、高湿的“桑拿天”频繁出现 酷暑难耐 不愧是一年一度的 六月天 在这样一个 气温高、湿度大、风速小的夏天 “农业”也度日如年 毕竟“上蒸下煮”的模式可真不是盖的 自从入伏后 日照强烈程度UP ↑ …

【CORS策略: Multiple CORS header ‘Access-Control-Allow-Origin‘ not allowed导致的跨域问题】

引起跨域CORS报错的原因有很多种&#xff01;&#xff01;&#xff01;&#xff01;&#xff01; 这里我的报错属于最后一条。 探索的原因 正常axios请求接口&#xff0c;调试接口时出现以下问题 Access to XMLHttpRequest at http://192.168.31.111:9000/api/user/sessio…

Java常见的数据结构:栈、队列、数组、链表、二叉树、二叉查找树、平衡二叉树、红黑树

一、数据结构 1.数据结构概述 数据结构是计算机底层存储、组织数据的方式。是指数据相互之间是以什么方式排列在一起的。 通常情况下&#xff0c;精心选择的数据结构可以带来更高的运行或者存储效率 2.常见的数据结构 栈 队列 数组 链表 二叉树 二叉查找树 平衡二叉…

共建、共享开源 EDA 共性技术框架 | 2023 开放原子全球开源峰会开源 EDA 分论坛即将启幕

电子电路设计自动化&#xff08;EDA&#xff09;融合了计算机、微电子、计算数学、图形学和人工智能等众多前沿技术&#xff0c;为集成电路设计、制造和封装等整个产业提供至关重要的自动化辅助设计能力。集成电路是支撑国民经济、社会发展和保障国家安全的基础性、先导性和战略…

【日常】怀念儿童时的多啦A梦

怀念儿童时期的多啦A梦 儿童时期的乐趣HTML多啦A梦效果图&#xff1a;总结对自己孩子的期望 儿童时期的乐趣 时光飞逝&#xff0c;如白驹过隙版飞逝而过&#xff0c;一眨眼已经到了奔三的年纪。俗话说三十而立&#xff0c;是我拖了三十群里的后腿&#xff0c;在这里说一声抱歉…

网页下载的视频看不了怎么回事 网页下载的视频怎么找不到了

在网页直接看视频虽然可以解决视频占用设备内存的情况&#xff0c;但直接通过网页看视频&#xff0c;在视频中间会有广告&#xff0c;或因为网速不好造成观看不流畅等问题&#xff0c;网页视频下来可以解决以上问题。网页下载的视频看不了怎么回事&#xff1f;网页下载的视频看…

连锁店也要玩转外卖:外卖商城系统让你轻松实现!

外卖商城系统是一种基于互联网技术的商业模式&#xff0c;它通过将消费者与商家连接起来&#xff0c;为消费者提供外卖服务&#xff0c;为商家提供一个在线销售平台。外卖商城系统的出现&#xff0c;极大地方便了人们的生活&#xff0c;也为商家带来了更多的销售机会。 商城功…

马斯克在中国的44小时!行程、会面与表态,释放出什么信号?

时隔3年&#xff0c;“自带流量”的美国特斯拉首席执行官马斯克再次到访中国&#xff0c;从公布的信息来看&#xff0c;可谓是行程满满。在中美关系似乎春寒料峭之际&#xff0c;马斯克的来华及表态极具象征意义。 马斯克&#xff1a;反对“脱钩断链” 5月30日下午15时30分左右…

深度学习笔记之循环神经网络(九)GRU的反向传播过程

深度学习笔记之循环神经网络——GRU的反向传播过程 引言回顾&#xff1a; GRU \text{GRU} GRU的前馈计算过程场景设计 反向传播过程 T \mathcal T T时刻的反向传播过程 T − 1 \mathcal T - 1 T−1时刻的反向传播路径 T − 2 \mathcal T - 2 T−2时刻的反向传播路径 总结 引言 …

事物管理.

目录 引入CURD满足什么属性&#xff0c;能解决上述问题&#xff1f;什么是事务&#xff1f;为什么会出现事务事务的版本支持事务提交方式事务常见操作方式事务隔离级别如何理解隔离性隔离级别查看与设置隔离性读未提交【Read Uncommitted】读提交【Read Committed】可重复读【R…

kaggle新赛:蛋白质功能预测大赛baseline

日前&#xff0c;Kaggle发布了CAFA 5 Protein Function Prediction蛋白质功能预测大赛。这是一个机器学习中的序列预测任务&#xff0c;需要你开发一个基于蛋白质氨基酸序列和其他数据的模型&#xff0c;预测一组蛋白质的功能。 该竞赛评估参与者对蛋白质序列的基因本体论&…

3D元宇宙数字展厅—虚拟智能化办公展厅引领未来办公新风尚

随着数字化技术和虚拟现实的迅猛发展&#xff0c;传统的办公方式正在经历一场革命性的变革。在这个数字化时代&#xff0c;虚拟智能化办公展厅正以其独特的优势和创新的展示方式&#xff0c;引领着未来办公的新风尚。 让我们一同探索虚拟智能化办公展厅的魅力&#xff0c;以及它…

k8s入门(二)之Deployment、DaemonSet、Job、CronJob

一、Deployment使用 状态&#xff1a;Available部署完成&#xff0c;Progressing进行中&#xff0c;Complete已经完成&#xff0c;Failed失败的 失败原因&#xff1a;Quota不足&#xff0c;ReadingnessProbe失败&#xff0c;image pull失败&#xff0c;Limit Ranges范围&#x…

一分钟跑出 AI 图像的生成平台

*Stability AI 最近推出了一个名为 StableStudio 的 AI 图像生成平台&#xff0c;这是一个开源的、基于社区驱动的平台&#xff0c;任何人都可以访问和使用。StableStudio 提供了一系列功能强大的工具和库&#xff0c;包括预训练模型、数据集、模型评估和调试工具等&#xff0c…

NSSCTF之Web篇刷题记录(13)

NSSCTF之Web篇刷题记录[12] [GXYCTF 2019]BabyUpload&#xff1a;[GKCTF 2020]cve版签到&#xff1a;[HCTF 2018]Warmup&#xff1a;[GDOUCTF 2023]泄露的伪装&#xff1a;[羊城杯 2020]easycon&#xff1a;[HNCTF 2022 Week1]Interesting_include&#xff1a; NSSCTF平台&…