Go 语言并发编程 及 进阶与依赖管理

news2024/11/25 18:55:29

1.0 从并发编程本质了解Go高性能的本质

1.1 Goroutine

协程可以理解为轻量级线程

Go更适合高并发场景原因之一:Go语言一次可以创建上万协成

“快速”:开多个协成 打印。

go func(): 在函数前加 go 代表 创建协程;

time.Sleep(): 协程阻塞,使主协程 在子协程结束前阻塞不退出

乱序输出 说明并行

1.2 协程通信 CSP (Communicating Sequential Processes)

通过通信共享内存:Channel通道遵循 先入先出 保证顺序

1.3Channel

Channel创建需要通过make()函数;

无缓冲通道也称 同步通道;有缓冲:缓冲满了之后要拿走才能存

通过通信共享内存 例子:

M主函数作为消费者 实际中业务比较复杂,所以会 比 生产者AB慢;我们用 带缓冲的通道 就不会因消费者M的消费速度 影响 生产者的执行效率;

1.4 并发安全Lock

addWithLock() 通过临界区控制实现;在 每次 x+=1前后加解锁

addWithOutLock() 没加锁; Add 测试函数;对两种实现做5个协程并发执行

结果为:加锁时输出预期结果10000;体现不加锁的并发安全问题

1.5 WaitGroup实现并发任务的同步

计算器=0表示所有并发任务结束

1.5.1阻塞的优化

好的,以上就是对go并发编程相关概念的介绍,这里简单做个小结

整个章节主要涉及3个方面,一个是协程,通过高效的调度模型实现高并发操作,一个是通道channel.通过通信实现共享内存;最后svnc相关关键字,实现并发安全操作和协程间的同步

2.0 依赖管理

这一章我们主要讲解go的依赖管理, 主要涉及go依赖管理的演进路线和go module实践

依赖指各种开发包

对于hello world以及类似的单体函数只需要依赖原生SDK,而实际工程会相对复杂,我们不可能基于标准库0~1编码搭建,而更多的关注业务逻辑的实现,而其他的涉及框架、日志、driver、以及collection等一系列依赖都会通过sdk的方式引入, 这样对依赖包的管理就显得尤为重要

2.1 Go依赖管理演进

2.1.1 GoPATH

GOPATH是Go语言支持的一个环境变量,value是Go项目的工作区

目录有以下结构:

src: 存放Go项目的源码pkg: 存放编译的中间产物,加快编译速度;

bin: 存放Go项目编译生成的二进制文件

大家想想用gopath依赖管理有 哪些弊端呢?

弊端

如图,同一个pkg,有2个版本,A-> A0,B-> B0.

而src下只能有1个版本存在,那AB项目无法保证都能编译通过。 也就是在gopath管理模式下,如果多个项目依赖同一个库,则依赖该库是同一份代码,所以不同项目不能依赖同一个库的不同版本,这很显然不能满足我们的项目依赖需求。为了解决这问题,govender出现了

2.1.2 GoVendor

Vendor是当前项目中的一个目录,其中存放了当前项目依赖的副本,在Vendor机制下,如果当前项目存在Vendor目录,会优先使用该目录下的依赖,如果依赖不存在,会从GOPATH中寻找。 vendor无法很好解决依赖包的版本变动问题和一个项目依赖同一个包的不同版本的问题,下面我们看一个场景

如图项目A依赖pkg b和c,而B和C依赖了D的不同版本,通过vendor的管理模式我们不能很好的控制对于D的依赖版本,一旦更新项目,有可能带来依赖冲突。

归根结底vendor不能清晰的标识依赖的版本概念原因是:他还是依赖源码

下面,go mod就应运而生了。

2.1.3 Go Module

Go Modules 是Go语言官方推出的依赖管理系统,解决了之前依赖管理系统存在的诸如无法依赖同一个库的多个版本等问题

G0 module从1.11 开始实验性引入,1.16 默认开启;我们一般都读为go mod,我们也先统一下名称

2.2 依赖管理三要素

那其实完善的依赖管理一般都需要3要素,这里我们先整体介绍下

这里熟悉java的同学,可以类比下maven

2.3.1 依赖配置-go.mod

首先模块路径(依赖管理基本单元)用来标识一个模块,从模块路径可以看出从哪里找到该模块,如果是github前缀则表示可以从Github 仓库找到该模块,依赖包的源代码由githu托管,如果项目的子包想被单独引用,则需要通过单独的go.mod文件进行管理

下面是依赖的原生库sdk版本(go 1.16)

最下面是单元依赖(最关键的部分),每个依赖单元用模块路径(跟上面的对应)+版本来唯一标示

2.3.2 依赖配置-version

gopath和govendor都是源码副本方式依赖,没有版本规则概念

而gmod为了方便版本管理 定义了版本规则,分为语义化版本和伪版本

其中语义化版本包括三部分,

不同的MAJOR大版本可以表示是不兼容的

所以即使是同一个库,MAJOR 版本不同也会被认为是不同的模块

MINOR版本通常是新增函数或功能,需要保持在MAJOR下做到前后兼容 patch 版本一般是修复 bug ;

基于commit的伪版本包括3部分,

版本前缀是和语义化版本一样的;

时间戳 yyyymmddhhmmss,也就是提交commit的时间,

最后是校验码(abcdefabcdef,包含 12 位的哈希前缀;每次提交commit后 Go 会默认生成一个伪版本

2.3.3 依赖配置-非直接依赖indirect

下面我们再来看下依赖单元中的特殊标识符,首先是indirect后缀

表示go.mod对应的当前模块,没有直接导入该依赖模块的包,也就是非直接依赖,标示间接依赖,例如

2.3.4 依赖配置-incompatible

下一个常见是的是incompatible

主版本2+模块(v2以上) 会在模块路径增加/vN(v1,v2这种后缀),这让gomod按照同的模块来处理同一个项目不同主版本的依赖(允许不同MAJOR版本间相互兼容)

由于gomod是1.11实验性引入,所以这项提出之前已经有一些仓库打上了v2或者更高版本的tag了,为了兼容这部分仓库,对于没有go.mod文件并且主版本在2或者以上的依赖,会在版本号后加上+incompatible 后缀

前面讲语义化版本提到,对于同一个库的不同的major版本,需要建立不同的pkg目录,用不同的gomod文件管理

如下面仓库为例,V1版本gomod在主目录下,而对于V2版本,则单独建立了V2目录,用另一个gomod文件管理依赖路径,来表明不同major的不兼容性

那对于有些V2+tag版本的依赖包未遵循这定义规则,就会打上incompatible标志,增加一个compatile的case

依赖图

答案竟然是B!

Go底层会根据自己的算法 选择最 低的兼容版本

2.3.5 依赖分发-回源

gomodule的依赖分发,也就是从哪里下载,如何下载的问题

github是比较常见给的代码托管系统平台,而Go Modules 系统中定义的依赖,最终可以对应到多版本代码管理系统中某一项目的特定提交或版本,这样的话,对于go.mod中定义的依赖,则直接可以从对应仓库中下载指定软件依赖,从而完成依赖分发。

但直接使用版本管理仓库下载依赖,存在多个问题

首先无法保证构建确定:软件作者可以直接码平台增加/修改/删除 软件版本,导致下次构建使用另外版本的依赖,或者找不到依赖版本

无法保证依赖可用性:依赖软件作者可以直接代码平台删除软件,导致依赖不可用;大幅增加第三方代码托管平台压力

2.3.5 依赖分发-Proxy

而go proxy就是解决这些问题的方案,Go Proxy 是一个服务站点

它会缓存源站中的软件内容,缓存的软件版本不会改变,并且在源站软件删除之后依然可用,从而实现了供“immutability”和“available”的依赖分发;

使用 Go Proxy 之后,构建时会直接从 Go Proxy 站点拉取依赖

类比项目中,如果下游无法满足我们上游的需求、接口,我们可以建一层适配器或Proxy解决

2.3.6 依赖分发-变量-GOPROXY

下面讲一下go proxy的使用,Go Modules通过GOPROXY环境变量控制如何使用 Go Proxy;GOPROXY是一个Proxy 站点URL列表,可以使用 “direct”表示源站 用逗号分隔

对于示例配置,整体的依赖寻址路径,会优先从proxy1下载依赖,如果proxy1不存在,后下钻proxy2寻找,如果proxy2,中不存在则会回源到源站直接下载依赖,缓存到proxy站点中。

2.3.7 工具-go get

对go module的管理工具介绍下使用,首先是go get

2.3.8 工具-go mod

go mod,尽量提交之前执行下go tidy,减少构建时无效依赖包的拉取

非常感谢您阅读到这里,如果这篇文章对您有帮助,希望能留下您的点赞👍 关注💖 收藏 💕评论💬感谢支持!!!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/865361.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

Redis心跳检测

在命令传播阶段&#xff0c;从服务器默认会以每秒一次的频率&#xff0c;向主服务器发送命令&#xff1a; REPLCON FACK <rep1 ication_ offset>其中replication_offset是从服务器当前的复制偏移量。 发送REPLCONF ACK命令对于主从服务器有三个作用&#xff1a; 检测主…

坑爹的 InsCode 删我文件

我担心的问题再次发生了&#xff0c;和当初用码云时一样&#xff0c;删我代码删我文件 唉&#xff0c;算求了&#xff0c;还是用自己的网络记事本算了。

人工智能讲师AIGC讲师叶梓:大模型这么火,我们在使用时应该关注些什么?

以下为叶老师讲义分享&#xff1a; P2-P5 大语言模型的演进 开山鼻祖&#xff1a;Transformer 常见的大模型 我们应该关注些什么&#xff1f; 事实描述的正确性2、知识的时效性3、理解、运用语言的能力4、上下文连贯性5、抗干扰&#xff08;误导&#xff09;性能6、无害性7、…

临时文档2

java 中 IO 流分为几种? 按照流的流向分&#xff0c;可以分为输入流和输出流&#xff1b;按照操作单元划分&#xff0c;可以划分为字节流和字符流&#xff1b;按照流的角色划分为节点流和处理流。 Java Io流共涉及40多个类&#xff0c;这些类看上去很杂乱&#xff0c;但实际…

Docker 大热,还不了解 Dockerfile 你就OUT啦~

♥ 前 言 前言&#xff1a;近年来 Docker 非常火&#xff0c;想要玩好 Docker 的话 Dockerfile 是绕不开的&#xff0c;这就好比想要玩好 Linux 服务器绕不开 shell 道理是一样的。今天我们就来聊一聊 Dockerfile 怎么写&#xff0c;那些指令到底是什么意思。 一、先来看一…

NIDS网络威胁检测系统-Golang

使用技术&#xff1a; Golang Gin框架 前端三件套 演示画面&#xff1a; 可以部署在linux和window上 目前已在Kali2021和Window10上进行测试成功

openGauss学习笔记-37 openGauss 高级数据管理-事务

文章目录 openGauss学习笔记-37 openGauss 高级数据管理-事务37.1 语法格式37.2 参数说明37.3 示例 openGauss学习笔记-37 openGauss 高级数据管理-事务 事务是用户定义的一个数据库操作序列&#xff0c;这些操作要么全做要么全不做&#xff0c;是一个不可分割的工作单位。ope…

IntelliJ中文乱码问题

1、控制台乱码 运行时控制台输出的中文为乱码&#xff0c;解决方法&#xff1a;帮助 > 编辑自定义虚拟机选项… > 此时会自动创建出一个新文件&#xff0c;输入&#xff1a;-Dfile.encodingUTF-8&#xff0c;然后重启IDE即可&#xff0c;操作截图如下&#xff1a; 2、…

微服务05-Sentinel流量防卫兵

随着微服务的流行,服务和服务之间的稳定性变得越来越重要。Sentinel 是面向分布式、多语言异构化服务架构的流量治理组件,主要以 流量 为切入点,从流量路由、流量控制、流量整形、熔断降级、系统自适应过载保护、热点流量防护等多个维度来帮助开发者保障微服务的稳定性。 S…

LightningChart JS 2023Crack,CPU高效实时更新

LightningChart JS 2023Crack,CPU高效实时更新 添加了新的极地热图图表类型-添加了新系列类型&#xff0c;允许您在极地坐标系中可视化热图。极地热图的一些关键特征是&#xff1a; 处理多达400万个数据点。 快速加载速度和CPU高效实时更新。 100ms以完全显示由所有数据填充的热…

软件测试面试题——如何测试App性能?

为什么要做App性能测试&#xff1f; 如果APP总是出现卡顿或网络延迟的情况&#xff0c;降低了用户的好感&#xff0c;用户可能会抛弃该App&#xff0c;换同类型的其他应用。如果APP的性能较好&#xff0c;用户体验高&#xff0c;使用起来丝滑顺畅&#xff0c;那该应用的用户粘…

Oracle数据库中的CLOB字段类型,映射到Map<String,Object>中异常问题解决

数据库中的某个字段是CLOB类型的&#xff0c;我在查询某个SQL的时候&#xff0c;用Map<String&#xff0c;Object>来接。就会报错。 解决办法&#xff1a; 创建一个自定义处理类&#xff1a; MappedTypes 定义的是 JavaType 类型&#xff0c;可以指定哪些 Java 类型被…

DARPA TC-e3/e5数据集bin转json

关于这个数据集的一些基本信息就不赘述了&#xff0c;参考我之前的博客。DARPA TC-engagement5数据集官方工具可视化 两个方法&#xff1a;修改ELK可视化工具或直接使用自带的工具。前者相对灵活&#xff0c;因为losgstash可以通过配置过滤器来修改字段&#xff1b;可以通过out…

【论文阅读】基于深度学习的时序预测——Non-stationary Transformers

系列文章链接 论文一&#xff1a;2020 Informer&#xff1a;长时序数据预测 论文二&#xff1a;2021 Autoformer&#xff1a;长序列数据预测 论文三&#xff1a;2022 FEDformer&#xff1a;长序列数据预测 论文四&#xff1a;2022 Non-Stationary Transformers&#xff1a;非平…

配置docker和复现

1.Nginx环境搭建 选择centos7来进行安装 1.1 创建Nginx的目录并进入 mkdir /soft && mkdir /soft/nginx/ cd /soft/nginx/ 1.2 下载Nginx的安装包&#xff0c;可以通过FTP工具上传离线环境包&#xff0c;或者通过wget命令在线获取安装包 wget https://nginx.org/down…

web后端解决跨域问题

目录 什么是跨域问题 为什么限制访问 解决 什么是跨域问题 域是指从一个域名的网页去请求另一个域名的资源。比如从www.baidu.com 页面去请求 www.google.com 的资源。但是一般情况下不能这么做&#xff0c;它是由浏览器的同源策略造成的&#xff0c;是浏览器对js施加的安全…

vue svg画渐变色线条

基于业务需求需要&#xff0c;需要使用svg画渐变色弧线并且采用虚线。并且封装成组件。 一、path路径 path路径是svg中最强大的图形&#xff0c;可以绘制各种svg所有能画的图形。 路径中的线是由d属性来绘制&#xff0c;属性参数由各种命令组成&#xff0c;以下是它的基本命…

解锁Python集合的妙用:常用函数与实例深度解析

Python的集合&#xff08;Set&#xff09;是一种无序且不重复的数据结构&#xff0c;拥有强大的去重和集合运算功能。在这篇博客中&#xff0c;我们将深入探讨集合的常用函数&#xff0c;并通过实际案例为你展示其灵活应用。 创建集合​ 集合可以通过花括号来创建&#xff0c…

[数据分析与可视化] Python绘制数据地图5-MovingPandas绘图实例

MovingPandas是一个基于Python和GeoPandas的开源地理时空数据处理库&#xff0c;用于处理移动物体的轨迹数据。关于MovingPandas的使用见文章&#xff1a;MovingPandas入门指北&#xff0c;本文主要介绍三个MovingPandas的绘图实例。 MovingPandas官方仓库地址为&#xff1a;mo…

地理测绘基础知识(1) 坐标系经纬度与ECEF直角坐标的基本换算

经纬度与ECEF直角坐标的基本换算 我们目前最常用的全球坐标系是WGS-84坐标系&#xff0c;各种手机、地图基本用经纬度来标记位置。然而&#xff0c;经纬度对于空间的计算是很复杂的&#xff0c;需要很多三角函数操作。平面直角坐标系利用向量的运算&#xff0c;可以非常方便的…