如何设计存储架构

news2025/4/28 6:37:15

步骤

步骤1:估算性能需求

任务

基于具体的业务场景来估算性能需求,包括存储量、读写性能等

挑战

  1. 不知道如何估算
  2. 担心估算不准

步骤2:选择存储系统

任务

根据技术储备、方案优缺点选择合适的存储系统

挑战

  1. 不知道有哪些存储系统
  2. 知道但是不知道应该怎么选

步骤3:设计存储方案

任务

基于选择的存储系统,设计其具体的存储方案,如果发现不行,回到步骤2再换一个

挑战

  1. 不知道如何设计存储方案

估算存储性能

步骤

在这里插入图片描述

步骤1:用户量预估

规划

根据成本、预算、目标等确定

案例
  1. 某个新业务预算投入2000万拉新
  2. 年底某业务用户规模达到100万

推算

基于已有数据推算

案例
  1. 做一个面向广州在校大学生的购物小程序
  2. 香港地铁扫码乘车业务

对比

跟已有标杆进行对比

案例
  1. 跟竞争对手比
  2. 跟自己已有的同类业务比

步骤2:用户行为建模

指标具体说明
行为用户的典型行为
数量采取某种行为的用户数量
频率用户某种行为的频率

案例

  1. 预计每个月使用钱包付款码的用户有100万,付款笔数到达500万笔
  2. 每天使用扫码乘车的用户有500万,平均扫码次数4.6次

步骤3:性能需求计算

指标具体说明
数据量需要存储的数据总量(G)
请求量对数据的读写请求量(TPS/QPS)
预留量预留的增长空间

说明和技巧

  1. 并不是所有数据都一定要用同样的存储方式,例如当前数据和历史数据可以分开存储
  2. TPS/QPS需要计算出以秒为单位的数值,并且计算“平均值”和“峰值”
  3. 预留增长空间不能太大也不能太小,如果能做到线性伸缩是最好的

选择存储架构

在这里插入图片描述

常见存储系统

在这里插入图片描述

如何选择合适的存储系统

指标具体说明
技术本质挑选应用场景和系统本质契合的系统
技术储备挑选熟悉的
综合考虑可维护性、成本、成熟度等

什么是技术本质

系统的DNA,有别于其他系统的典型特征

技术本质有什么影响

技术本质决定了其核心应用场景和优缺点

举例

  1. 游戏服务器用什么存储玩家数据比较好
  2. 论坛服务器用什么存储帖子数据比较好

设计存储方案

步骤1:设计数据结构

选择或者设计具体的数据结构,例如如何设计具体的表,选择Redis的哪个数据结构

步骤2:验证读写场景

将数据结构放到具体的场景进行验证,设计读写具体如何执行(Rule)

步骤3:评估读写性能

评估具体场景下的数据结构设计是否满足性能需求,不满足则重新设计

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/9954.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

UG NX二次开发(C#)-UI Styler-批量选择点

1、前言 在设计UG NX的对话框界面时,有时需要选择点,在UI Styler编辑器中已经设置好了可以指定点选择按钮,这个点选择对话框是单选,不是多选的,如果想选择多个点,那么可以采用对象选择按钮,本文介绍下选择点的操作。 2、指定点按钮 2.1 设计UI Styler UG NX的UI Sty…

vscode中Emmet语法的使用

每篇博文的浪漫主义 【镰仓旅拍|落日绝景 极致画质|沉浸式旅行 FX3】 https://www.bilibili.com/video/BV1jg411Y7vC/?share_sourcecopy_web&vd_source385ba0043075be7c24c4aeb4aaa73352 镰仓旅拍|落日绝景 极致画质|沉浸式旅行 FX31.1快速生成HTML结构语法 生成标签直接…

想要彻底卸载Mac应用程序,还得要用这些方法才行

Mac电脑如果有太多无用的应用程序,很有可能会拖垮Mac系统的运行速度。因此,卸载电脑中无用的软件是优化Mac系统运行速度的最佳方式之一。Mac删除应用程序特别简单,长点击应用点击x,或是直接将应用拖进废纸篓。但是有一些应用长按没…

Qt——(详细)“项目在Debug构建环境下能运行而在Release构建环境下不能运行”解决方案之一,以及 禁用(黄色)警告

系列文章目录 提示: 文章目录系列文章目录前言环境一、问题准备工作——为了在Release环境下可以进行断点调试分析二、解决1、根据需求,对函数类型进行更改2、根据需求,在函数内添加“return [int]”延伸——“禁用警告”消除 变量 的“黄色感…

现代修谱,如何看待支系单飞的现象?

族谱与支谱、房谱的区别 现代修谱,修的是什么谱,你知道吗?其实现代修谱的种类有很多种,有支谱、房谱、族谱、宗谱、统谱、通谱等等,而这些在生活中都被我们简称为家谱。 不过在现代修谱里,宗谱、统谱、通谱…

极智编程 | 谈谈 C++ 中容器 map 和 unordered_map 的区别

欢迎关注我的公众号 [极智视界],获取我的更多笔记分享 大家好,我是极智视界,本文来 谈谈 C 中 map 和 unordered_map 的区别。 map 和 unordered_map 都可以看做是一种 key-value 的映射关系,unordered_map 可以理解为 无序版的ma…

C语言 数组

C语言 数组一、一维数组1. 数组的创建方式程序清单1程序清单22. 计算数组的元素的个数3. 数组在内存中的存储方式二、二维数组1. 二维数组的创建方式2. 计算二维数组的行和列3. 二维数组在内存中的存储方式三、数组名的含义总结数组名的应用场景数组名作为函数参数一、一维数组…

22.11.16打卡 mysql学习笔记

马上要考试了, 越到考试越想玩, 烦躁烦躁烦躁, 没学多少, 争取明天把mysql基础篇学完 DCL介绍 2022年11月16日 14:54 DCL主要用来处理数据库有哪些用户可以访问, 每个用户具有什么样的权限 用户管理 2022年11月16日 15:20 所有用户的数据都存放在系统数据库mysql中的user表…

Python是什么?要如何学习?

Python 是荷兰人 Guido van Rossum (吉多范罗苏姆,中国程序员称其为“龟叔”)在 1990 年初开发的一种解释型编程语言。 Python 的诞生是极具戏曲性的,据 Guido 自述记载,Python 语言是在圣诞节期间为了打发无聊的时间而…

基于全景相机的视觉里程计算法研究

一、视觉里程计 视觉里程计技术首先建立相机的成像模型,接着通过标定算法计算相机参数,最后建立相邻图像的关联并估计相机运动轨迹。 1.1相机在空间中运动的描述 描述相机在三维空间中的运动状态,即求解相机在空间中不同时刻下的位姿关系。相…

假冒网站引发多重安全风险 | 官方严正声明:切勿在非官方渠道购买或下载 Navicat 软件

Navicat 严正声明 近期,有关于 Navicat 假冒网站的事件,不法分子通过仿制官方网站,诱导用户下载盗版软件。Navicat 官方已正式向国内监管部门举报,提请将该不法网站下架。目前,监管部门已介入调查中。 我司呼吁广大用…

这次,听人大教授讲讲分布式数据库的多级一致性|TDSQL 关键技术突破

近年来,凭借高可扩展、高可用等技术特性,分布式数据库正在成为金融行业数字化转型的重要支撑。分布式数据库如何在不同的金融级应用场景下,在确保数据一致性的前提下,同时保障系统的高性能和高可扩展性,是分布式数据库…

C语言之详解内存操作函数

个人主页:平行线也会相交 欢迎 点赞👍 收藏✨ 留言✉ 加关注💓本文由 平行线也会相交 原创 收录于专栏【C/C】 目录前言memcpy模拟实现memmove模拟实现memcmpmemset前言 memcpy叫做内存拷贝,memmove叫做内存移动,memc…

【数据结构】模拟实现双向链表

你必须非常努力,才能显得毫不费劲 目录 1.模拟实现双向链表 1.1 DLinkedList的内部类 1.2 DLinkedList的成员属性 1.3 DLinkedList的成员方法 1.3.1 在链表开头插入一个新结点 1.3.2 在链表结尾插入一个新的结点 1.3.3 计算结点个数 1.3.4 在链表任意位置…

4.构造器,this,修饰符详解

构造器: 构造器也叫构造方法,无返回值。非构造方法必须要有返回类型 主要作用:完成对象的初始化,创造对象时,自动调用构造器初始化对象 即使没有显示地使用static关键字,构造器实际上也是静态方法 JAVA…

HTML---基础入门知识详解

1:标签的概念 在别人写的网页中我们会看到许多文字,图片排版整齐,让人看的赏心悦目,这就是用到了标签,或者说标签就是帮我们实现某种作用的工具,比如制作段落,换行,导入图片&#x…

Android App 导出APK安装包以及制作App图标讲解及实战(图文解释 简单易懂)

操作有问题请点赞关注收藏后评论区留言~~~ 一、导出APK安装包 之前在运行App的时候,都是先由数据线连接手机和电脑,再通过Android Studio的Run菜单把App安装到手机上,这种方式只能在自己手机上调试应用,如果想在别人手机上安装应…

Python画爱心——谁能拒绝用代码敲出会跳动的爱心呢~

还不快把这份浪漫拿走!!节日就快到来了,给Ta一个惊喜吧~ 今天给大家分享一个浪漫小技巧,利用Python中的 HTML 制作一个立体会动的心动小爱心 成千上百个爱心汇成一个大爱心,从里到外形成一个立体状,给人视…

FITC标记SPG,FITC-SPG,荧光素标记链球菌G蛋白

产品名称:FITC标记SPG,荧光素标记链球菌G蛋白 英文名称:FITC-SPG 纯度:98% 规格:1mg 5mg 10mg 产地:西安 说明:提供使用说明,核磁图谱,包装,价格&#xff0…

ipv6地址概述——带你了解ipv6与ipv4的不同

作者简介:一名在校云计算网络运维学生、每天分享网络运维的学习经验、和学习笔记。 座右铭:低头赶路,敬事如仪 个人主页:网络豆的主页​​​​​​ 目录 前言 一.ipv4与ipv6 1.ipv4与ipv6概述 在开始Pv6的学习以前&#xf…