【分布式技术专题】「架构实践于案例分析」盘点一下分布式模式下的服务治理和监控优化方案

news2024/12/28 3:57:15

什么是服务治理?

相信每一个软件公司(企业)都希望可以确保开发及项目运行流程可以顺利,但是如果要完美完结那么需要其中会有很多的因素存在。包括,最佳实践架构原则服务治理以及其他决定性的因素。而其中服务治理指的是⽤来管理SOA(微服务)所采⽤和实现的重要环节和因素。下图就算是一个较为完整得RPC模型得服务治理体系机制。

典型的问题

  • 变更管理变更⼀个服务通常会引起不可预⻅的后果,因为服务的消费者对服务的提供者来说是不可知的
  • 服务质量的保证弹性添加新服务需要对这些服务给予额外的关注

分布式应⽤的治理

服务注册与发现

单体服务拆分为微服务,如果微服务之间存在调⽤依赖,就需要得到⽬标服务的服务地址,也就是微服务治理的”服务发现“。要完成服务发现,就需要将服务信息存储到某个载体(实例),载体本身是微服务治理的”服务注册中⼼“,存储到载体的动作即是”服务注册“。

服务得可观测性

微服务由于较单体应⽤有了更多的部署实例,需要对众多服务间的调⽤关系、状态有清晰的掌控

可观测性就包括了调⽤拓扑关系、监控(Metrics)、⽇志(Logging)、调⽤追踪(Trace)等,所下图所示,可以通过采用中心进行流量控制得限流控制能力。

服务流量管控

微服务本身存在不同版本,在版本迭代得过程中,需要对微服务间调⽤进⾏控制,以完成微服务版本更迭的平滑

流量管控主要是根据流量的特征(访问参数等)百分⽐向不同版本服务分发,这也孵化出灰度发布蓝绿发布A/B测试等服务治理的主题,

面向的统计流量范围,主要包含请求打进来的流量管理和微服务之间的流量管理

服务安全控制

安全

不同微服务承载⾃身独有的业务职责,对于业务敏感的微服务,需要对其他服务的访问进⾏认证与鉴权,也就是安全问题

控制

当服务治理能⼒充分建设后,就需要有⾜够的控制能⼒,能实时进⾏服务治理策略向微服务分发。

监控

监控的可视化

监控的可视化,随时了解系统运⾏情况帮助我们快速定位问题。

  1. 通过数据采样分析进行分析对应得上报数据从而帮助我们快速定位问题。
  2. 通过上报数据的信息,进行多维度的指标计算,方便我们时时刻刻的进行分析系统服务,打造全方位的监控体系。
监控维度

在我们日常的实际项⽬中,我们实现了四种维度的监控。

容器实例级别的监控

针对于使用的容器服务,例如:Docker、Podman或者moby服务,k8s的pod(单pod只管理一个容器)级别,那么我们监控的就是容器内部的服务级别,可以理解为实例级别,例如下图我们的crm容器实例,下面每一个容器都是一个监控对象

针对于SpringBoot的应⽤,我们一般处了专门的监控服务,例如,夜莺、Zabbix和Promethus等,还可以参考SpringBoot-Admin,⾃⼰实现了⼀套监控界⾯,监控Spring Boot应⽤。

  • Zabbix(https://www.zabbix.com/)
  • Nagios(https://www.nagios.org/)
  • open-falcon(https://github.com/XiaoMi/open-falcon)
主要指标
  • Spring Boot Admin:https://github.com/codecentric/spring-boot-admin
  • GC/threaddump/heapdump⽇志的分析:http://gceasy.io/
应⽤实例级别的监控

针对于应用级别的服务实例监控,例如我们有crm服务系统,那么如果我们集群部署、分布式部署等方式,那么会针对于将应用的整体,下图就是整体的应用体系作为一个指标对象,它的指标对象监控维度就是将所有的内部的容器实例监控指标合并。

  • Prometheus(https://github.com/prometheus/prometheus, 当然Prometheus不仅能监控容器,还能监控数据库、操作系统,甚⾄可以和Spring Boot集成,但⽬前业界主要⽤来监控容器。

系统级的监控

调⽤链监控
  • Sleuth + Zipkin,可选的调⽤链监控⼯具。
  • SkyWalking(https://github.com/apache/incubator-skywalking),示例项⽬:http://49.4.12.44:8080/#/user/login)
  • PinPoint(https://github.com/naver/pinpoint)
⽇志监控及优化
  • Skywalking快速找到性能瓶颈
  • ELK分析⽇志快速找到问题
JVM监控及调优工具推荐
  • GCPlot(https://github.com/dmart28/gcplot):GC⽇志打印,并⽤⼯具分析
  • FastThread(http://fastthread.io/):
  • GCEasy(http://gceasy.io/):dump堆、dump线程,并⽤⼯具分析
  • VisualVM/JDK Mission Control等⼯具帮助我们分析问题

中间件级别监控

Zabbix监控是一个老牌劲旅了。

Redis监控
  • Redis Live(https://github.com/nkrode/RedisLive)
  • Redis Stat(https://github.com/junegunn/redis-stat)
  • Cache Cloud(https://github.com/sohutv/cachecloud)
  • Prometheus(https://github.com/prometheus/prometheus)
Kafka监控
  • Kafka Manager(https://github.com/yahoo/kafka-manager)
MySQL
  • MyCAT(https://github.com/MyCATApache/Mycat-Server)

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/114842.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

新冠确诊阳性的第七篇博客,Linux动态监控系统

新冠确诊阳性的第七篇博客,Linux动态监控系统1.动态监控进程2.动态监控网络1.动态监控进程 top命令和ps相似,都可以用来显示系统正在执行的进程,top和ps的最大不同之处就是在于top在执行一段时间可以更新正在运行的进程(也可以理…

JavaScript:优先级队列的实现案例

优先级队列的定义:优先级队列(priority_queue)其实,不满足先进先出的条件,更像是数据类型中的“堆”。优先级队列每次出队的元素是队列中优先级最高的那个元素,而不是队首的元素。这个优先级可以通过元素的…

架构设计(九):估算

架构设计(九):估算 作者:Grey 原文地址: 博客园:架构设计(九):估算 CSDN:架构设计(九):估算 估算在系统设计中非常重…

还在用定时器吗?借助 CSS 来监听事件

平时工作中很多场合都要用到定时器,比如延迟加载、定时查询等等,但定时器的控制有时候会有些许麻烦,比如鼠标移入停止、移出再重新开始。这次介绍几个借助 CSS 来更好的控制定时器的方法,一起了解一下吧,相信可以带来不一样的体验 一、hover 延时触发 有这样一个场景,在…

C++ WebSockSet服务器解决方案

使用C实现WebSocket服务器是为了解决Web直接访问本地应用程序最佳解决方案。解决云访问硬件最经济的方案或增加了一种解决方法。方案选用开源uWebSockets库。 开发工具选择Visual C 2017,所有源码或工程都用它编译或创建。 1. 准备工作 下载以下第三方库最新版源码并且编译供…

FMOC-PEG-COOH,FMOC-PEG-acid,芴甲氧羰基-聚乙二醇-羧基试剂供应

英文名称:FMOC-PEG-COOH,FMOC-PEG-acid 中文名称:芴甲氧羰基-聚乙二醇-羧基 蛋白质、肽和其他材料通过氨基酸或其他酸活性化学组,增加溶解度和稳定性,降低免疫原性;药物修饰或缓释药物研发,新…

复旦MBA第二学位:畅享顶尖国际商科资源,探索全球发展新可能

自2009年以来,复旦MBA项目一直致力于与顶级院校开展合作,拓宽学生的国际视野。目前,复旦MBA项目与三所国际顶尖合作院校达成了第二学位项目的合作:美国麻省理工学院斯隆管理学院管理学硕士学位(Master of Science in Management S…

【OpenCV-Python】教程:7-7 PCA

OpenCV Python PCA 【目标】 利用 pca 来计算目标的方向 【理论】 Introduction to Principal Component Analysis (PCA) PCA(主成分分析)是提取最重要特征的统计过程。 假设你有一组2D点,如上图所示。每个维度都对应于您感兴趣的特性。…

Blender——苹果的材质绘制

效果图 前言 在进行纹材质的绘制之前,首先要具有苹果的三维模型和进行苹果纹理绘制。 关于苹果的建模请参考:Blender——“苹果”建模_行秋的博客 关于苹果的纹理绘制请参考:Blender——苹果纹理绘制_行秋的博客 书接上回,由Te…

FMOC-PEG-acid,FMOC-PEG-COOH,芴甲氧羰基PEG羧基用于探究新型材料

用于探究新型材料的化学试剂芴甲氧羰基-聚乙二醇-羧基, 其英文名为FMOC-PEG-acid(FMOC-PEG-COOH),它所属分类为Boc/Fmoc protected amine PEG Carboxylic acid PEG。 芴甲氧羰基peg羧基试剂的分子量均可定制,有&#…

使用nginx实现自定义大小预览缩略图,http_image_filter模块的安装使用

使用nginx实现自定义大小预览缩略图,http_image_filter模块的安装使用注意事项服务器配置方法安装模块备份http_image_filter模块用以调用配置文件调整引入模块修改配置文件设置访问入口随后重启nginx服务访问请求测试注意事项 本预览图功能使用的是nginx的http_im…

哦,原来事务传播是这样

引言 ​ 在介绍正文之前,让我们先一起来看下这段代码: Transactionalpublic void createProduct(Long skuId, Integer number, Long operatorUcid) {// 插入商品信息recordProduct(skuId, number);// 插入商品操作记录日志recordProductOperateLogClass…

关于操作数组元素的实际应用

sort()升序、降序排序方法应用 sort()排序方式原理:当sort()传入函数中的第一个参数a位于第二个参数b之前,则返回一个负数,相等则返回0,a位于b之后则返回正数。 比如,当要做升序排序时,我们需要想到前面的…

【SpringMVC】常用注解

1.RequestParam 1.1 使用说明 作用: 把请求中指定名称的参数给控制器中的形参赋值 属性: ​ **value:**请求参数中的名称 ​ **required:**请求参数是否必须提供此参数。默认值:true,表示必须提供,如果…

Linux下tree命令C/C++实现(以树状格式列出目录的内容)

在UNIX/LINUX系统中,tree是一个递归目录列表程序,它生成文件的深度缩进列表。在没有参数的情况下,树将列出当前目录中的文件。当给定目录参数时,树依次列出在给定目录中找到的所有文件或目录。列出找到的所有文件和目录后&#xf…

机器学习从零到入门 逻辑回归详解

逻辑回归详解 从零开始 从理论到实践一、逻辑回归的理解1.1、字面含义1.2、引申1.2.1、阶跃函数的引入1.2.2、可导的阶跃函数 - Logistic函数1.2.3、Logistic回归1.2.4、回归系数的求解 - 极大似然估计二、sklearn的使用参考一、逻辑回归的理解 前面介绍了线性回归及其衍生回归…

目标检测之YOLOv4算法分析

基本原理 网络结构 CSPDarknet53 最后三个箭头指向输出即三种特征图 SPP 解决多尺度问题 对于同一个特征输出图,进行三种maxpool2d操作,然后将三种操作的输出进行叠加 PANet 融合上采样、下采样等特征,深度方向拼接 PANet由五个核心模…

Unity 3D工具栏与常用工具||Unity 3D 菜单栏与快捷键

Unity 3D 的工具栏( Toolbar )中,一共包含 13 种常用工具,如下所列。 一. 平移窗口工具:平移场景视图画面。 快捷键:鼠标中键 二. 位移工具:针对单个或两个轴向做位移。 快捷键:W…

stm32f407VET6 系统学习 day04 DHT11 温湿度传感器

1.温湿度的一次完整的数据包括: 一次完整的数据传输为40bit,高位先出。 数据格式: 8bit湿度整数数据 8bit湿度小数数据 8bi温度整数数据 8bit温度小数数据 8bit校验(校验和的值是前四个字节数据的和) 用户MCU发送一次开始信号后,DHT11从低功耗模式转…

灰色关联分析(系统分析+综合评价)

系统分析:探究系统中哪个自变量对系统的影响最大 灰色关联分析的基本思想是根据序列曲线几何形状的相似程度来判断其联系是否紧密。曲线越接近,相应序列之间的关联度就越大,反之就越小 应用一、进行系统分析(国内比赛合适&#xf…