架构训练营学习笔记:4-4如何设计存储架构?

news2024/11/26 0:39:33

存储架构设计的三个步骤

 分为:1 估算性能需求 2、选择存储系统 3 设计存储方案

性能估算步骤

一 用户量预估

 2B的业务,数据量需要预估,2C的需要决策。

 方法:

规划:根据成本、预算、目标等确定

推算:基于已有数据推算

对比:跟已有标杆 对比

二用户行为建模

行为:用户的典型行为

数量:采取某种行为的用户数量

三性能需求计算

数据量:需要存储的数据总量(G),冷热可以分开存储

请求量:需要存储的数据总量(TPS/QPS),并且计算“平均值”和“峰值”

预留量:预留的增长空间,能做到平滑线性伸缩最好。

存储性能计算案例:

这是李老师举例的地铁刷码支付的过程。注意估算相关的存储,这个还没有算单条记录大小,

 选择存储架构

 常见存储系统分类

 如何选择合适的存储系统

技术本质:挑选应用场景和系统本质契合的系统

技术储备:挑选熟悉的

综合考虑:可维护性、成本、成熟度等

技术本质就是有别于其他系统的典型特征,决定了核心应用场景和优缺点。

先理解技术本质,后掌握技术细节 。

存储方案的 设计的三个步骤 

设计数据结构、验证读写场景、评估读写性能 

存储方案设计案例:Redis存储粉丝列表

 举例是list与set的区别,这种较为明显的区别,不用再写到备选方案做评审,内部讨论即可。当然还得考虑业务复杂性,针对极端的热点大V,再做针对性拆分优化,但不是类型差异那么大了。

 

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/760365.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

SRA数据下载的一个坑

前两天协助处理GEO数据上的一个单细胞数据,发现了一个巨坑,这里分享下,希望大家能避开。 需要下载的数据集是,GSE119562,查询SRA Run Selector,找到它对应的SRR编号。 于是,我非常熟练的用pref…

【接口自动化测试】HTTP协议详解

协议 简单理解,计算机与计算机之间的通讯语言就叫做协议,不同的计算机之间只有使用相同的协议才能通信。所以网络协议就是为计算机网络中进行数据交换而建立的规则,标准或约定的集合。 OSI模型 1978年国际化标准组织提出了“开放系统互联网…

java实现敏感词过滤,简单实例,dfa算法

java实现敏感词过滤,简单实例,dfa算法 最近在看黑马的视频学习的时候,看到了,自定义敏感词过滤的,感觉蛮有意思的,记录一下。 直接上实例 第一步初始化敏感词(可以写死,当然在开发…

Ceres Solver简介及使用

Ceres Solver是一个开源的C库,用于建模和解决大型、复杂的优化问题。它是一个成熟、功能丰富且高性能的库,自2010年以来一直在Google生产中使用。最新发布版本为2.1.0,license为BSD,它支持在Windows、Linux、Mac、Android、iOS上编译,源码地址…

D. Black Cells

Problem - 1821D - Codeforces 思路:我们能够发现题意的区间是不重叠的,并且任意两个区间之间的间隔至少是2,我们会发现一个性质,它一定是从前缀中进行选择的,但是前缀中长度为1的区间可以不选择,因为如果长…

STM32单片机示例:使用定时器触发DMA

文章目录 前言基础说明关键配置与代码示例链接 前言 单片机中使用定时器触发DMA是比较好用的一种操作,这里将对此做个示例说明。 基础说明 ST官方的例程中有一个 TIM_DMA 的例程,其功能是启用一个定时器,设置其中一路通道输出PWM&#xff…

【深入浅出Spring原理及实战】「夯实基础系列」360全方位渗透和探究Spring的核心注解开发和实现指南(Spring5的常见的注解)

360全方位渗透和探究Spring的核心注解开发和实现指南 Spring的注解介绍核心基础注解核心注解分析xml文件的配置configuration的配置 Lazy && ScopeComponentScan添加Controller、Service、Repository注入到spring容器ComponentScan多包扫描的属性排除某些包或者类的扫描…

SpringBoot读取配置的6种方式

1. 概述 通过了解springboot加载配置,可以更方便地封装自定义Starter。 在SpringBoot中,可以使用以下6种方式读取 yml、properties配置: 使用Value注解:读取springboot全局配置文件单个配置。使用Environment接口:通过…

详解c++---异常

目录标题 c语言传统处理错误的方式c异常的使用异常的规则服务器常用的异常继承体系异常安全异常的规范异常的优缺点: c语言传统处理错误的方式 第一种: 程序在运行过程中终止了程序,比如说assert int main() {int i 0;scanf("%d"…

5.5 python函数式编程之--返回函数、匿名函数、偏函数(暂时稍微了解即可)

1、 先回归历史:什么是函数函数就是通过将局部【目标】实现并封装起来, 后续可直接拿来用2、 函数式编程: 是把运算过程尽量写成一系列嵌套的函数调用一、返回函数 返回函数: 函数作为返回值闭包: 函数内部定义函…

OJ练习第138题——树中距离之和

树中距离之和 力扣链接:834. 树中距离之和 题目描述 给定一个无向、连通的树。树中有 n 个标记为 0…n-1 的节点以及 n-1 条边 。 给定整数 n 和数组 edges , edges[i] [ai, bi]表示树中的节点 ai 和 bi 之间有一条边。 返回长度为 n 的数组 answe…

Vue项目搭建过程

Vue项目搭建过程 1、安装NodeJs 1.1 下载安装包 在 http://nodejs.cn/download/ 上下载64位安装包,然后进行安装,和普通软件的安装一样。 C:\Users\Administrator>node -v v16.13.1C:\Users\Administrator>npm -v 8.5.51.2 安装cnpm # 安装cn…

什么是「推荐系统」,有哪些主要的推荐方法?

1 什么是推荐系统 什么是推荐系统?根据维基百科的定义, 它是一种信息过滤系统,主要功能是预测用户对物品 的评分和偏好。这一定义回答了推荐系统的功能是过滤信息、连接用户和推送信息。将这一定义扩 展一下, 推荐系统就是自动联…

文献阅读:MathPrompter: Mathematical Reasoning using Large Language Models

文献阅读:MathPrompter: Mathematical Reasoning using Large Language Models 1. 内容简介2. 方法细节3. 实验内容4. 结论&思考 文献链接:https://arxiv.org/abs/2303.05398 1. 内容简介 这篇文章是今年3月份的时候微软提出的一篇工作&#xff0…

SpringBoot中间件—ORM(Mybatis)框架实现

目录 定义 需求背景 方案设计 代码展示 UML图 实现细节 测试验证 总结 定义: ORM:Object Relational Mapping --> 对象关系映射,是一种程序设计技术,用于实现面向对象编程语言里面不同类型系统的数据之间的转换 需求背…

前端|CSS(一)| pink老师

参考视频:黑马程序员前端CSS3基础教程,前端必备基础 目录 📚CSS引入 🐇引入CSS样式表 📚CSS基础选择器 🐇标签选择器 🐇类选择器(最常用) 🐇id选择器 …

VIM文本如何复制到系统剪切板?

今天从vim上用鼠标复制代码,发现把VIM当中的行号也复制进去了,就很麻烦,于是简单研究了下,如果vim支持clipboard的话就比较好办,具体支持与否,使用命令查看: vim --version | grep "clipb…

C语言指针面试题

C语言指针面试题 一.指针和数组1.一维数组2.字符数组3.二维数组 二.指针 一.指针和数组 1.一维数组 int a[] {1,2,3,4};(1)printf("%d\n",sizeof(a));// 16(2)printf("%d\n",sizeof(a0));// 4/8(3)printf("%d\n",sizeof(*a));// 4(4)printf(&…

xred病毒分析

概述 xred病毒是一种感染型病毒,会感染系统中特定目录下的exe和xlsx文件,该病毒会将自身伪装成Synaptics触摸板驱动程序,使用Dephi编写。 样本的基本信息 Verified: Unsigned Link date: 6:22 1992/6/20 Company: Synaptics Description: S…