Day01 项目简介分布式基础概念

news2024/11/25 5:59:39

        最近在改进公司开发的商城项目,看到了尚硅谷的谷粒商城,就快速学习了下,因为之前的Kafka,Redis都是在这学习的,还有大数据的Flink。所以感觉一定不错,就开始了。

        这里做一下学习笔记  

一、项目简介
1 、项目背景
1 )、电商模式
市面上有 5 种常见的电商模式 B2B B2C C2B C2C O2O
1 B2B 模式
B2B (Business to Business) , 是指商家与商家建立的商业关系。 如:阿里巴巴
2 B2C 模式
B2C (Business to Consumer) , 就是我们经常看到的供应商直接把商品卖给用户,即 商对客
模式,也就是通常说的商业零售,直接面向消费者销售产品和服务。如:苏宁易购、京东、
天猫、小米商城
3 C2B 模式
C2B (Customer to Business) ,即消费者对企业。先有消费者需求产生而后有企业生产,即先
有消费者提出需求,后有生产企业按需求组织生产
4 C2C 模式
C2C (Customer to Consumer) ,客户之间自己把东西放上网去卖,如:淘宝,闲鱼
5 O2O 模式
O2O Online To Offline ,也即将线下商务的机会与互联网结合在了一起,让互联网成为线
下交易的前台。线上快速支付,线下优质服务。如:饿了么,美团,淘票票,京东到家
2 )、谷粒商城
谷粒商城是一个 B2C 模式的电商平台,销售自营商品给客户。
2 、项目架构图
1 、项目微服务架构图
学的就是这个架构思想图

 按图说明:

1. 自定义防火墙,Nignx集群,cdn加速

2.走springCloud gateWay统一网关解析具体的请求,去到具体的服务,认证授权/动态路由/令牌限流

3. 在服务调用中采用Fegin/Ribbon/Sentinel 做服务调用和治理熔断

4.采用OAuth2.0/SpringSecurit做权限授权登录控制

5.采用Nacos做服务注册与发现,服务配置功能,  SpringBoot Admin 服务监控

6.Zipkin /Sleuth/Metrics做链路追踪- 数据流向Prometheus-Grafana-Alermanager做服务监控告警

7.日志存储ELK,文字检索/商品检索ES

8 缓存Redis ,采用Reddison框架丰富功能,比如分布式锁,信号量

9. 持久化Mysql, ShardingSphere分库分表

10.消息队列RabbitMq,消峰,解耦,异步

11.定时任务,对象存储OSS

12.结合Gitee/GiteLab + Docker + K8s + Jenkins Pipeline做CICD自动化运维部署

13.采用SpringBoot+Mybtis+Maven父子模块的基础开发模式

14.Seata分布式事务

15.集群压测,调试指导

等等...

 二、分布式基础概念

1 、微服务
微服务架构风格,就像是把一个 单独的应用程序 开发为 一套小服务 ,每个 小服务 运行在
进程 中,并使用轻量级机制通信,通常是 HTTP API 。这些服务围绕业务能力来构建,
并通过完全自动化部署机制来独立部署。这些服务使用不同的编程语言书写,以及不同数据
存储技术,并保持最低限度的集中式管理。
简而言之:拒绝大型单体应用,基于业务边界进行服务微化拆分,各个服务独立部署运行。
拆分服务
 
2 、集群 & 分布式 & 节点
集群是个物理形态,分布式是个工作方式。
只要是一堆机器,就可以叫集群,他们是不是一起协作着干活,这个谁也不知道
分布式是指将不同的业务分布在不同的地方。
集群指的是将几台服务器集中在一起,实现同一业务。
分布式中的每一个节点,都可以做集群。 而集群并不一定就是分布式的。
节点:集群中的一个服务器
3 、远程调用
在分布式系统中,各个服务可能处于不同主机,但是服务之间不可避免的需要互相调用,我
们称为远程调用。
SpringCloud 中使用 HTTP+JSON 的方式完成远程调用
用过dubbo的可以考虑2种区别,优缺点
4 负载均衡
分布式系统中, A 服务需要调用 B 服务, B 服务在多台机器中都存在, A 调用任意一个
服务器均可完成功能。
为了使每一个服务器都不要太忙或者太闲,我们可以负载均衡的调用每一个服务器,提
升网站的健壮性。
常见的负载均衡算法:
轮询: 为第一个请求选择健康池中的第一个后端服务器,然后按顺序往后依次选择,直
到最后一个,然后循环。
最小连接: 优先选择连接数最少,也就是压力最小的后端服务器,在会话较长的情况下
可以考虑采取这种方式。
散列: 根据请求源的 IP 的散列(
hash )来选择要转发的服务器。这种方式可以一定程
度上保证特定用户能连接到相同的服务器。如果你的应用需要处理状态而要求用户能连接到
和之前相同的服务器,可以考虑采取这种方式。
5 、服务注册 / 发现 & 注册中心
A 服务调用 B 服务, A 服务并不知道 B 服务当前在哪几台服务器有,哪些正常的,哪些服务
已经下线。解决这个问题可以引入注册中心;

如果某些服务下线,我们其他人可以实时的感知到其他服务的状态,从而避免调用不可用的
服务
6 、配置中心

7 、服务熔断 & 服务降级
在微服务架构中,微服务之间通过网络进行通信,存在相互依赖,当其中一个服务不可用时
有可能会造成雪崩效应。要防止这样的情况,必须要有容错机制来保护服务。

-- 服务熔断
a. 设置服务的超时,当被调用的服务经常失败到达某个阈值,我们可以开
启断路保护机制,后来的请求不再去调用这个服务。
本地直接返回默认的数据
-- 服务降级
a. 在运维期间,当系统处于高峰期,系统资源紧张,我们可以让非核心业务降级运行。
降级:某些服务不处理,或者简单处理【抛异常、返回 NULL、调用 Mock 数据、调用 Fallback 处理逻辑】。

8 、API 网关

在微服务架构中,API Gateway 作为整体架构的重要组件,它 抽象了微服务中都需要的公共功能 ,同时提供了客户端 负载均衡, 服务自动熔断, 灰度发布, 统一认证, 限流流控, 日志统计等丰富的功能,帮助我们解决很多 API 管理难题。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/666319.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

UIAutomatorViewer工具的使用

目录 前言: 一、uiautomatorviewer介绍 二、启动uiautomatorviewer 三、uiautomatorviewer界面 四、连接手机 前言: UIAutomatorViewer是Android SDK提供的一个可视化界面分析工具,可以用于查看Android应用的UI界面结构、属性信息以及布…

元宇宙在技术大爆炸时代迎来链游新世界

元宇宙是从虚拟游戏、虚拟艺术收藏品开始兴起,然后逐步扩展到社交和金融领域的。元宇宙的终极形态就是一种“无限游戏”,也即打破边界、颠覆规则、不断迭代和进化发展的新世界。 政策落地,元宇宙未来才能充满潜力 2021 年以来,元…

SSM在线学习平台-计算机毕设 附源码85204

SSM在线学习平台 摘 要 随着科学技术的飞速发展,社会的方方面面、各行各业都在努力与现代的先进技术接轨,通过科技手段来提高自身的优势,在线学习平台当然也不能排除在外。在线学习平台是以实际运用为开发背景,运用软件工程原理和…

数字非洲,沐光而行

“华为是什么公司?我们不相信中国企业能有先进的通信技术!你们也不要总是来找我!”1998年,华为人刚踏上非洲所遇到的,不是来自阳光大陆的热情,而是来自刚果(金)客户冷冰冰的拒绝。 2…

国产崛起,继操作系统装机500w,又有软件平台用户突破600w

国产操作系统行业部署超500W 这次,国产操作系统终于扬眉吐气了! 国产的操作系统装机已达到500万,国产崛起的时刻已来! 近日,国产操作系统的佼佼者——统信UOS,召开见面会,宣布:目…

7DGroup性能实施项目日记2

壬寅年 己酉月 己卯日 秋高气爽 天气转凉 昨天大风昨天看到项目计划中已经有了很多内容。 也就是说计划感觉已经写得差不多了。我仔细看了一下之后觉得这个计划不可行,就是样子挺像。 然后我问管理组,这个是你们商量之后写的吗?他们说不…

Java互联网工程师1100题(总结最全面的面试题)

本来已经在为去大厂工作摩拳擦掌的 Java 朋友,社招又是需要 5 年以上的,今年显得格外艰难: 就业人数高达 874 万!人才竞争加剧! 大多数公司的招聘需求缩减!对社招来说,人才招聘要求愈来愈高&am…

Spring核心思想之IOC和AOP

IOC和AOP不是Spring提出的,在spring之前就已经存在,只不过更偏向于理论化,Spring在技术层次把这两个思想做了⾮常好的实现(Java)。 Spring核心思想 IOC(Inversion of Control)什么是IoC?IoC解决了什么问题…

unittest单元测试框架

目录 前言: 一、unittest模块的各个属性说明 二、使用unittest框架编写测试用例思路 三、使用unittest框架编写测试用例实例 前言: unittest是Python自带的单元测试框架,可以用于编写和执行单元测试。 一、unittest模块的各个属性说明 …

Linux内核4.14版本——drm框架分析(9)——DRM_IOCTL_MODE_GETCONNECTOR(drm_mode_getconnector)

目录 1. drm_mode_getconnector分析 1.1 找到connector 1.2 计算该connector的encoder数量 1.3 把connector支持的encoder和数量返回给用户 1.4 把找到的connector的参数返回给应用 1.5 填充mode(很重要) 1.6 把找到的connector的参数返回给应用 …

excel爬虫相关学习2:excel 和 vba 爬虫相关xmlhttp方法

目录 前言:vba 爬虫相关xmlhttp的方法 1 什么是xmlhttp 1.1 定义 1.2 特点 定义XMLHTTP对象: XMLHTTP方法: open(bstrMethod, bstrUrl, varAsync, bstrUser, bstrPassword) send(varBody) setRequestHeader(bstrHeader, bstrValue) …

Java 被挤出前三。。

TIOBE 2023 年 06 月份的编程语言排行榜已经公布,官方的标题是:Python 还会保持第一吗?(Will Python remain number 1?) 在过去的 5 年里,Python 已经 3 次获得 TIOBE 指数年度大奖,这得益于…

简述Spring中IOC核心流程

基础概念 IOC 和 DI IOC,即控制反转。是Spring的一种设计思想。传统程序设计中,我们创建一个对象是通过 new 关键字,是程序主动去创建依赖对象,而在spring中专门有一个容器来创建和管理这些对象,并将对象依赖的其他对…

rpm详解——原理,命令详细讲解

目录 三个问题 什么是RPM SRPM (Source RPM) RPM软件包 RPM 查询命令 查询已安装的RPM软件信息 查询文件/目录属于哪个RPM软件 查询未安装的RPM包文件 RPM 软件包的安装、卸载 安装 卸载 RPM 升级与更新 三个问题 先抛出三个问题,最后简单解释一下。 …

HiveSQL 电商场景TopK统计

数据准备 CREATE TABLE test.test2 ( user_id string, shop string ) ROW format delimited FIELDS TERMINATED BY \t; INSERT INTO TABLE test.test2 VALUES ( u1, a ), ( u2, b ), ( u1, b ), ( u1, a ), ( u3, c ), ( u4, b ), ( u1, a ), ( u2, c ), ( u5, b ), ( u4, b )…

基于人工智能的AI理发师能帮托尼老师做什么?

BarberGPT是一个人工智能理发师,它可以让您在照片上尝试不同的发型。您只需要上传您的照片,标记您的头发,然后就可以看到惊人的变化。BarberGPT使用了先进的深度学习技术,可以根据您的脸型、肤色和发质生成适合您的发型。BarberGP…

国产监控数据库产品lepus最新版学习和部署(V5.1)

目录 lepus是什么? 二进制安装(最新v5.1) 1.基础环境 2.安装NSQ 3.NSQ消息测试 4.安装lepus 5.初始化数据库 6.修改配置文件 7.启动服务组件 8.安装lepus-console 9.运行和访问控制台 lepus是什么? Lepus数据库监控系统…

Docker容器应用为工业连接提供了新选择

一 智能数据管理 Docker容器应用可灵活部署在异构计算平台上,且仅需占用少量的资源,这可为工业4.0提供一种新的数据集成方案。Docker容器应用程序是提供特定功能的小型软件模块,可在自动化领域中用于智能数据管理。而Softing推出的一个新产品…

简要介绍 | CUDA底层原理:加速高性能计算的关键技术

注1:本文系“简要介绍”系列之一,仅从概念上对CUDA的底层原理进行非常简要的介绍,不适合用于深入和详细的了解。 CUDA底层原理:加速高性能计算的关键技术 CUDA Refresher: The GPU Computing Ecosystem | NVIDIA Technical Blog 1…

通过SECS/GEM平台实现半导体设备与EAP系统互联

在半导体电子和光伏行业大量的设备需要通过SECS/GEM协议与EAP系统进行互联。 常见的设备互联需求主要分为以下几类: 1.生产过程自动化:设备通过EAP下发指令进行切换程序、条码或RFID标签采集、Foup自动加载与卸载、晶圆生产加工自动化,减少…