分布式系统的演化(单机架构/应用符合和存储服务分离架构/应用服务集群架构/主从分离架构/冷热分离架构)

news2024/11/26 3:30:51

文章目录

  • 单机架构
  • 应用服务和存储服务分离
  • 应用服务集群架构
  • 读写分离/主从分离架构
  • 冷热分离架构--引入缓存
  • 分库分表

单机架构

单机架构只有一台服务器,使用一台服务器负责所有的工作

举个例子:假设有以下电商网站,商品、用户、交易等功能服务以及数据库都在一个服务器上。

在这里插入图片描述

而现在计算机硬件发展也是非常快的,哪怕只有一台主机,这一台主机的性能也是非常高的。可以支持高并发和非常大的数据存储。

但是,如果说业务进一步增长,用户量和数据量都水涨船高,那么,一台主机难以应付的时候,就需要再增加主机了。

为什么硬件资源会不够用呢?

因为,一台主机所包括的硬件资源主要都有(cpu、内存、硬盘等等),而服务器每次收到一个请求,都是需要消耗上述的资源的,如果同一时刻,处理的请求太多的(高并发),此时就可能导致某个硬件资源不够用了,就都会导致服务器处理请求的时间变长,甚至处理出错~~

此时,遇见这种服务器不够用的情况(高并发情况),有效的处理方式可以从两方面考虑:

  1. 开源 ,增加更多的硬件资源。
  2. 节流,针对软件上进行优化,例如sql语句优化等

如果使用开源的方式,就会出现一个问题,一个主机上面能增加的硬件资源也是有限的,所以,一台主机扩展到极限了,但是还是不够,就只能引入多台主机,一旦引入多台主机了,此时系统就可以称为“分布式系统”。

引入分布式是好是坏呢?

答:引入分布式是万不得已的,一旦引入分布式,系统的复杂程度就会大大提高,系统越复杂,出现bug的概率就越高,但是,如果出现一台主机无法处理的情况,还是要使用分布式的,所以,就需要根据具体的业务场景来指定更好的解决方案。

应用服务和存储服务分离

最简单的分布式系统就是将应用服务器和数据库服务器分离,将应用服务器放在另一台主机上,数据库服务器放在另一台主机上。

在这里插入图片描述

但是,随着请求量进一步增加,这时候,一台应用服务器可能就会顶不住了,此时就就可以使用集群架构,引入多个应用服务器,如下图。

应用服务集群架构

引入负载均衡器(也是一个单独的服务器)来管理多个应用服务器,意思就是,所有的用户请求都要先到负载均衡器上,然后再由负载均衡器将请求进行分发,发送到不同的应用服务器上,保证了应用服务器再高并发场景下,不会进行宕机。

在这里插入图片描述

对于负载均衡器来说,也有很多的流量调度(对请求进行分发)的算法,例如:

  1. 轮询算法:非常公平的将请求依次发给不同的应用服务器

相关的负载均衡软件都有:Nginx、HAProxy、LVS等

还有一个问题就是:使用负载均衡器是因为请求量太大了,单个应用服务器无法承受,所以要使用负载均衡器进行分配,但是,如果并发量太高的话,负载均衡器能承受的住吗?

答案是:负载均衡器对于请求量的承担能力,要远超于应用服务器的,因为,负载均衡器它的工作主要是向不同的应用服务器上分发请求,而应用服务器的任务是处理请求,负载均衡器就好像是领导,负责分配任务,应用服务器就好像是组员,负责执行任务。分配任务肯定是要比执行任务更轻松的。

如果请求量大到了负载均衡器也扛不住了,此时,也可以引入更多的负载均衡器(引入多个机房)。

读写分离/主从分离架构

上面使用了负载均衡器来给不同的应用服务器分配请求,但是,现在有一个问题,就是不管扩充多少个应用服务器,这些请求最终都是要到数据库中读写数据,那所有的压力不都给到了数据库服务器吗,所以,针对这样的情况,就可以设置一些数据库为主数据库,一些数据库为 从数据库,从库所有的数据都来自主库,经过同步后,从库中的数据和主库保持一致,而为了分担数据库的压力,可以将写数据请求全部交给主库处理,读数据请求分散到各个从库中,因为,一个程序中读操作要比写操作更多,这样也就缓解了数据库的压力,当然,这个数据同步的过程也是有时间成本的。

在这里插入图片描述

冷热分离架构–引入缓存

上面虽然通过主从架构缓解了数据库的压力,但是,我们知道,数据库中的数据都是在硬盘中存储的,读硬盘就会很慢,为了能够提高获取数据的速度,就可以把数据区分“冷热”,热点数据放到缓存中,缓存的访问速度要比硬盘快很多,因为,缓存中的数据是在内存中保存着的,所以,redis主要的用途就是用来管理缓存服务器中的数据,如下图:

在这里插入图片描述

分库分表

上述都是针对请求量太大时所做的解决策略,但是,引入分布式系统,不光要能够去应对更高的请求量,同时也要能应对更大的数据量,当数据太多时,也可能会存在一台主机存不下的情况,可以使用多台主机存储,针对数据库进行进一步的拆分,本来一个数据库服务器上有多个数据库,现在引入多个数据库服务器,每个数据库服务器存储一个或多个数据库,如果某个表特别大,大到一台主机存不下,也可以针对表进行拆分,拆分成多个表分布在不同的主机上。

,每个数据库服务器存储一个或多个数据库,如果某个表特别大,大到一台主机存不下,也可以针对表进行拆分,拆分成多个表分布在不同的主机上。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1852334.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

实验六:三维图形修改器的综合应用

如果文章有写的不准确或需要改进的地方,还请各位大佬不吝赐教💞💞💞。朱七在此先感谢大家了。😘😘😘 🏠个人主页:语雀个人知识库 🧑个人简介:大家…

【STM32-启动文件 startup_stm32f103xe.s】

STM32-启动文件 startup_stm32f103xe.s ■ STM32-启动文件■ STM32-启动文件主要做了以下工作:■ STM32-启动文件指令■ STM32-启动文件代码详解■ 栈空间的开辟■ 栈空间大小 Stack_Size■ .map 文件的详细介绍■ 打开map文件 ■ 堆空间■ PRESERVE8 和 THUMB 指令…

OCC显示渲染结构剖析

1.Display显示 2.Drawer 3.Graphics 4.InteractiveContext 5.Render 6.Selection 7.View

探索计算机视觉(人工智能重要分支)的发展与应用

引言 在当今快速发展的科技时代,计算机视觉作为人工智能领域的重要分支,正日益成为各行各业不可或缺的关键技术。从简单的图像处理到复杂的智能系统,计算机视觉的发展不仅改变了我们看待世界的方式,也深刻影响着工业、医疗、交通等…

数据结构与算法引入(Python)

华子目录 引入第一次尝试第二次尝试 算法的概念算法的五大特性 算法效率衡量执行时间单靠时间值绝对可信吗? 时间复杂度与 "大O记法"如何理解 “大O记法” 最坏时间复杂度时间复杂度的几条基本计算规则 算法分析常见的时间复杂度常见时间复杂度之间的关系…

两种单例模式(保证线程安全)

开始前,球球各位读者给个三连吧,有错误感谢指出,谢谢 单例模式也叫单个实例,也就是这个类只有且只能有一个实例对象,这样一个类就叫做“单例”;单例模式有很多种,这里只介绍“饿汉模式”和“懒…

vscode+picgo+gitee实现Markdown图床

vscode中编辑Markdown文件,复制的图片默认是保存在本地的。当文档上传csdn时,会提示图片无法识别 可以在gitee上创建图床仓库,使用picgo工具上传图片,在Markdown中插入gitee链接的方式来解决该问题。 一、 安装picgo工具 1.1 v…

1-Wire的使用

代码: ds18b20.c /*《AVR专题精选》随书例程3.通信接口使用技巧项目:1-Wire 单总线的使用文件:ds1820.c说明:DS18B20驱动文件。为了简单,没有读取芯片地址,也没有计算校验作者:邵子扬时间&…

Golang | Leetcode Golang题解之第167题两数之和II-输入有序数组

题目&#xff1a; 题解&#xff1a; func twoSum(numbers []int, target int) []int {low, high : 0, len(numbers) - 1for low < high {sum : numbers[low] numbers[high]if sum target {return []int{low 1, high 1}} else if sum < target {low} else {high--}}r…

http1.x和http2.0的一些区别

1、http2.0采用多路复用技术&#xff0c;可以同时发送多个请求或回应 2、http2.0可以由服务器主动向客户端推送数据 3、http2.0对头信息进行压缩&#xff0c;并维护一张信息表&#xff0c;生成头信息索引号&#xff0c;发送时只发送索引号

使用普通定时器产生半双工软件串口

代码&#xff1a; /*《AVR专题精选》随书例程3.通信接口使用技巧项目&#xff1a;使用普通定时器和外中断实现半双工软件串口文件&#xff1a;softuart.c说明&#xff1a;软件串口驱动文件作者&#xff1a;邵子扬时间&#xff1a;2012年12月16日*/ #include "softuart.h&…

YOLOv9基础 | 实时目标检测新SOTA,手把手带你深度解析yolov9论文!

前言:Hello大家好,我是小哥谈。YOLOv9是Chien-Yao Wang等人提出的YOLO系列的最新版本之一(截止到目前,YOLOv10已发布),于2024年2月21日发布。它是 YOLOv7的改进版本,两者均由Chien-Yao Wang及其同事开发。本节课就以YOLOv9论文为基础带大家深入解析YOLOv9算法。🌈 …

web基础学习

1、安装 1.1、创建一个 React 新项目 如果你正在学习 React 或者考虑将其应用到现有的项目中&#xff0c;你可以 利用 script 标签将 React 添加到任何 HTML 页面 来快速开启学习之旅。如果你的项目需要许多组件和许多文件&#xff0c;那就需要考虑以下方式了&#xff01; 1…

WinMerge v2 (开源的文件比较/合并工具)

前言 WinMerge 是一款运行于Windows系统下的免费开源的文件比较/合并工具&#xff0c;使用它可以非常方便地比较多个文档内容甚至是文件夹与文件夹之间的文件差异。适合程序员或者经常需要撰写文稿的朋友使用。 一、下载地址 下载链接&#xff1a;http://dygod/source 点击搜…

【干货】Android中高级开发进阶必备资料(附:PDF+视频+源码笔记)

4、数据传输与序列化 5、Java虚拟机原理 6、高效IO 设计思想解读开源框架 随着互联网企业的不断发展&#xff0c;产品项目中的模块越来越多&#xff0c;用户体验要求也越来越高&#xff0c;想实现小步快跑、快速迭代的目的越来越难&#xff0c;插件化技术应用而生。如果没有…

Python: HexBinDecOct

因为&#xff1a; f0b1001110# 十进制 int()a0*2**01*2**11*2**21*2**30*2**40*2**51*2**6print(a)# 八进制 oct()print(78/8,78%8)# 110 001 001 8 116print(1*2**00*2**10*2**2,1*2**00*2**10*2**2,0*2**01*2**11*2**2)#十六进制 hex()#0 100 1110 16 4Eprint(sixteenFoo(0*…

leetcode 二分查找·系统掌握 第一个错误版本

题意&#xff1a; 题解&#xff1a; 就是经典的~01~泛型查找&#xff0c;而且一定存在这样错误的版本所以查找不会"失败"&#xff0c;返回每次查找结果即可。 int firstBadVersion(int n) {long l1,rn,mid;while(l<r){mid(lr)>>1;if(isBadVersion(mid))r…

wordpress教程自动采集并发布工具

随着互联网的快速发展&#xff0c;越来越多的人开始关注网络赚钱。而对于许多人来说&#xff0c;拥有一个自己的个人网站是一个不错的选择。然而&#xff0c;要让自己的个人网站内容丰富多样&#xff0c;就需要不断地进行更新。那么&#xff0c;有没有一种方法可以让我们轻松地…

【大数据 复习】第7章 MapReduce(重中之重)

一、概念 1.MapReduce 设计就是“计算向数据靠拢”&#xff0c;而不是“数据向计算靠拢”&#xff0c;因为移动&#xff0c;数据需要大量的网络传输开销。 2.Hadoop MapReduce是分布式并行编程模型MapReduce的开源实现。 3.特点 &#xff08;1&#xff09;非共享式&#xff0c;…

Java学习 - 网络IP协议簇 讲解

IP协议 IP协议全称 Internet Protocol互联网互连协议 IP协议作用 实现数据在网络节点上互相传输 IP协议特点 不面向连接不保证可靠 IP协议数据报结构 组成说明版本目前有IPv4和IPv6两种版本首部长度单位4字节&#xff0c;所以首部长度最大为 15 * 4 60字节区分服务不同…