Go 语言并发编程 及 进阶与依赖管理

1.0 从并发编程本质了解Go高性能的本质

1.1 Goroutine

协程可以理解为轻量级线程

Go更适合高并发场景原因之一:Go语言一次可以创建上万协成

“快速”:开多个协成 打印。

go func(): 在函数前加 go 代表 创建协程;

time.Sleep(): 协程阻塞,使主协程 在子协程结束前阻塞不退出

乱序输出 说明并行

1.2 协程通信 CSP (Communicating Sequential Processes)

通过通信共享内存:Channel通道遵循 先入先出 保证顺序

1.3Channel

Channel创建需要通过make()函数;

无缓冲通道也称 同步通道;有缓冲:缓冲满了之后要拿走才能存

通过通信共享内存 例子:

M主函数作为消费者 实际中业务比较复杂,所以会 比 生产者AB慢;我们用 带缓冲的通道 就不会因消费者M的消费速度 影响 生产者的执行效率;

1.4 并发安全Lock

addWithLock() 通过临界区控制实现;在 每次 x+=1前后加解锁

addWithOutLock() 没加锁; Add 测试函数;对两种实现做5个协程并发执行

结果为:加锁时输出预期结果10000;体现不加锁的并发安全问题

1.5 WaitGroup实现并发任务的同步

计算器=0表示所有并发任务结束

1.5.1阻塞的优化

好的,以上就是对go并发编程相关概念的介绍,这里简单做个小结

整个章节主要涉及3个方面,一个是协程,通过高效的调度模型实现高并发操作,一个是通道channel.通过通信实现共享内存;最后svnc相关关键字,实现并发安全操作和协程间的同步

2.0 依赖管理

这一章我们主要讲解go的依赖管理, 主要涉及go依赖管理的演进路线和go module实践

依赖指各种开发包

对于hello world以及类似的单体函数只需要依赖原生SDK,而实际工程会相对复杂,我们不可能基于标准库0~1编码搭建,而更多的关注业务逻辑的实现,而其他的涉及框架、日志、driver、以及collection等一系列依赖都会通过sdk的方式引入, 这样对依赖包的管理就显得尤为重要

2.1 Go依赖管理演进

2.1.1 GoPATH

GOPATH是Go语言支持的一个环境变量,value是Go项目的工作区

目录有以下结构:

src: 存放Go项目的源码pkg: 存放编译的中间产物,加快编译速度;

bin: 存放Go项目编译生成的二进制文件

大家想想用gopath依赖管理有 哪些弊端呢?

弊端

如图,同一个pkg,有2个版本,A-> A0,B-> B0.

而src下只能有1个版本存在,那AB项目无法保证都能编译通过。 也就是在gopath管理模式下,如果多个项目依赖同一个库,则依赖该库是同一份代码,所以不同项目不能依赖同一个库的不同版本,这很显然不能满足我们的项目依赖需求。为了解决这问题,govender出现了

2.1.2 GoVendor

Vendor是当前项目中的一个目录,其中存放了当前项目依赖的副本,在Vendor机制下,如果当前项目存在Vendor目录,会优先使用该目录下的依赖,如果依赖不存在,会从GOPATH中寻找。 vendor无法很好解决依赖包的版本变动问题和一个项目依赖同一个包的不同版本的问题,下面我们看一个场景

如图项目A依赖pkg b和c,而B和C依赖了D的不同版本,通过vendor的管理模式我们不能很好的控制对于D的依赖版本,一旦更新项目,有可能带来依赖冲突。

归根结底vendor不能清晰的标识依赖的版本概念原因是:他还是依赖源码

下面,go mod就应运而生了。

2.1.3 Go Module

Go Modules 是Go语言官方推出的依赖管理系统,解决了之前依赖管理系统存在的诸如无法依赖同一个库的多个版本等问题

G0 module从1.11 开始实验性引入,1.16 默认开启;我们一般都读为go mod,我们也先统一下名称

2.2 依赖管理三要素

那其实完善的依赖管理一般都需要3要素,这里我们先整体介绍下

这里熟悉java的同学,可以类比下maven

2.3.1 依赖配置-go.mod

首先模块路径(依赖管理基本单元)用来标识一个模块,从模块路径可以看出从哪里找到该模块,如果是github前缀则表示可以从Github 仓库找到该模块,依赖包的源代码由githu托管,如果项目的子包想被单独引用,则需要通过单独的go.mod文件进行管理

下面是依赖的原生库sdk版本(go 1.16)

最下面是单元依赖(最关键的部分),每个依赖单元用模块路径(跟上面的对应)+版本来唯一标示

2.3.2 依赖配置-version

gopath和govendor都是源码副本方式依赖,没有版本规则概念

而gmod为了方便版本管理 定义了版本规则,分为语义化版本和伪版本

其中语义化版本包括三部分,

不同的MAJOR大版本可以表示是不兼容的

所以即使是同一个库,MAJOR 版本不同也会被认为是不同的模块

MINOR版本通常是新增函数或功能,需要保持在MAJOR下做到前后兼容 patch 版本一般是修复 bug ;

基于commit的伪版本包括3部分,

版本前缀是和语义化版本一样的;

时间戳 yyyymmddhhmmss,也就是提交commit的时间,

最后是校验码(abcdefabcdef,包含 12 位的哈希前缀;每次提交commit后 Go 会默认生成一个伪版本

2.3.3 依赖配置-非直接依赖indirect

下面我们再来看下依赖单元中的特殊标识符,首先是indirect后缀

表示go.mod对应的当前模块,没有直接导入该依赖模块的包,也就是非直接依赖,标示间接依赖,例如

2.3.4 依赖配置-incompatible

下一个常见是的是incompatible

主版本2+模块(v2以上) 会在模块路径增加/vN(v1,v2这种后缀),这让gomod按照同的模块来处理同一个项目不同主版本的依赖(允许不同MAJOR版本间相互兼容)

由于gomod是1.11实验性引入,所以这项提出之前已经有一些仓库打上了v2或者更高版本的tag了,为了兼容这部分仓库,对于没有go.mod文件并且主版本在2或者以上的依赖,会在版本号后加上+incompatible 后缀

前面讲语义化版本提到,对于同一个库的不同的major版本,需要建立不同的pkg目录,用不同的gomod文件管理

如下面仓库为例,V1版本gomod在主目录下,而对于V2版本,则单独建立了V2目录,用另一个gomod文件管理依赖路径,来表明不同major的不兼容性

那对于有些V2+tag版本的依赖包未遵循这定义规则,就会打上incompatible标志,增加一个compatile的case

依赖图

答案竟然是B!

Go底层会根据自己的算法 选择最 低的兼容版本

2.3.5 依赖分发-回源

gomodule的依赖分发,也就是从哪里下载,如何下载的问题

github是比较常见给的代码托管系统平台,而Go Modules 系统中定义的依赖,最终可以对应到多版本代码管理系统中某一项目的特定提交或版本,这样的话,对于go.mod中定义的依赖,则直接可以从对应仓库中下载指定软件依赖,从而完成依赖分发。

但直接使用版本管理仓库下载依赖,存在多个问题

首先无法保证构建确定:软件作者可以直接码平台增加/修改/删除 软件版本,导致下次构建使用另外版本的依赖,或者找不到依赖版本

无法保证依赖可用性:依赖软件作者可以直接代码平台删除软件,导致依赖不可用;大幅增加第三方代码托管平台压力

2.3.5 依赖分发-Proxy

而go proxy就是解决这些问题的方案,Go Proxy 是一个服务站点

它会缓存源站中的软件内容,缓存的软件版本不会改变,并且在源站软件删除之后依然可用,从而实现了供“immutability”和“available”的依赖分发;

使用 Go Proxy 之后,构建时会直接从 Go Proxy 站点拉取依赖

类比项目中,如果下游无法满足我们上游的需求、接口,我们可以建一层适配器或Proxy解决

2.3.6 依赖分发-变量-GOPROXY

下面讲一下go proxy的使用,Go Modules通过GOPROXY环境变量控制如何使用 Go Proxy;GOPROXY是一个Proxy 站点URL列表,可以使用 “direct”表示源站 用逗号分隔

对于示例配置,整体的依赖寻址路径,会优先从proxy1下载依赖,如果proxy1不存在,后下钻proxy2寻找,如果proxy2,中不存在则会回源到源站直接下载依赖,缓存到proxy站点中。

2.3.7 工具-go get

对go module的管理工具介绍下使用,首先是go get

2.3.8 工具-go mod

go mod,尽量提交之前执行下go tidy,减少构建时无效依赖包的拉取

非常感谢您阅读到这里,如果这篇文章对您有帮助,希望能留下您的点赞👍 关注💖 收藏 💕评论💬感谢支持!!!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/76477.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

阿里云OSS对象存储的核心概念与购买应用

文章目录 1.OSS对象存储基本介绍1.1.OSS对象存储概念1.2.NAS与OSS存储的不同1.3.OSS的应用场景1.4.OSS术语对应表 2.购买OSS存储资源包3.KodCloud云盘接入OSS对象存储3.1.创建Bucket存储空间3.2.创建子用户用于管理Bucket3.3.获取用户的AccessKey3.3.为用户设置权限3.4.将Bucke…

PHP实践:分布式场景下的Session共享解决方案实现

🏆作者简介,黑夜开发者,全栈领域新星创作者✌,CSDN博客专家,阿里云社区专家博主,2023年6月CSDN上海赛道top4。 🏆数年电商行业从业经验,历任核心研发工程师,项目技术负责…

PHP实现在线年龄计算器

1. 输入日期查询年龄 2. php laravel框架实现 代码 /*** 在线年龄计算器*/public function ageDateCal(){// 输入的生日时间$birthday $this->request(birthday);// 当前时间$currentDate date(Y-m-d);// 计算周岁$age date_diff(date_create($birthday), date_create($…

通过OpenTelemetry上报Python-flask应用数据(阿里云)

参考文档 https://help.aliyun.com/document_detail/611711.html?spma2c4g.90499.0.0.34a056ddTu2WWq 先按照 方法一:手动埋点上报Python应用数据 步骤测试上报是否正常。 flas 上报 在 手动埋点上报Python应用数据 的基础上,上报flask应用的数据&#…

LeetCode 160.相交链表

文章目录 💡题目分析💡解题思路🚩步骤一:找尾节点🚩步骤二:判断尾节点是否相等🚩步骤三:找交点🍄思路1🍄思路2 🔔接口源码 题目链接👉…

leetcode 力扣刷题 数组交集(数组、set、map都可实现哈希表)

数组交集 349. 两个数组的交集排序+双指针数组实现哈希表unordered_setunordered_map 350. 两个数组的交集Ⅱ排序 双指针数组实现哈希表unordered_map 349. 两个数组的交集 题目链接:349. 两个数组的交集 题目内容如下,理解题意&#xff1a…

完美解决Github提交PR后报错:File is not gofumpt-ed (gofumpt)

问题阐述 最近在Github上提交PR后,遇到了这么一个问题:golangci-lint运行失败,具体原因是File is not gofumpt-ed (gofumpt)。 名词解释 golangci-lint: golangci-lint 是Go语言社区中常用的代码质量检查工具,它可以…

【C++学习手札】一文带你初识运算符重载

食用指南:本文在有C基础的情况下食用更佳 🍀本文前置知识: C类 ♈️今日夜电波:クリームソーダとシャンデリア—Edo_Ame江户糖 1:20 ━━━━━━️💟──────── 3:40 …

Linux 僵死进程

fork复制进程之后,会产生一个进程叫做子进程,被复制的进程就是父进程。不管父进程先结束,还是子进程先结束,对另外一个进程完全没有影响,父进程和子进程是两个不同的进程。 一、孤儿进程 现在有以下代码:…

第4章:决策树

停止 当前分支样本均为同一类时,变成该类的叶子节点。当前分支类型不同,但是已经没有可以用来分裂的属性时,变成类别样本更多的那个类别的叶子节点。当前分支为空时,变成父节点类别最多的类的叶子节点。 ID3 C4.5 Cart 过拟合 缺…

TCP服务器—实现数据通信

目录 前言 1.接口介绍 2.编写服务器 3.编写客户端 4.编译链接 5.测试 6.总结 前言 今天我们要介绍的是使用TCP协议实现数据通信,相比于之前写的UDP服务器实现数据信,在主体逻辑上并没有差别。客户端向服务器发送信息,服务器接受信息并回…

时序预测 | MATLAB实现基于CNN-LSTM卷积长短期记忆神经网络的时间序列预测-递归预测未来(多指标评价)

时序预测 | MATLAB实现基于CNN-LSTM卷积长短期记忆神经网络的时间序列预测-递归预测未来(多指标评价) 目录 时序预测 | MATLAB实现基于CNN-LSTM卷积长短期记忆神经网络的时间序列预测-递归预测未来(多指标评价)预测结果基本介绍程序设计参考资料 预测结果 基本介绍 MATLAB实现基…

item_get_sales-获取TB商品销量详情

一、接口参数说明: item_get_sales-获取商品销量详情,点击更多API调试,请移步注册API账号点击获取测试key和secret 公共参数 请求地址: https://api-gw.onebound.cn/taobao/item_get_sales 名称类型必须描述keyString是调用key&#xff08…

vim键盘图

国外:http://www.viemu.com/a_vi_vim_graphical_cheat_sheet_tutorial.html,原创,有SVG图,有分步骤的图。 国内翻译:[https://blog.csdn.net/qq_41052753/article/details/101031847 有几个配色,很高清&…

gitee上传一个本地项目到一个空仓库

gitee上传一个本地项目到一个空仓库 引入 比如,你现在本地下载了一个半成品的框架,现在想要把这个本地项目放到gitee的仓库上,这时就需要我们来做到把这个本地项目上传到gitee上了。 具体步骤 1. 登录码云 地址:https://gite…

mysql 索引 区分字符大小写

mysql 建立索引,特别是unique索引,是跟字符集、字符排序规则有关的。 对于utf8mb4_0900_ai_ci来说,0900代表Unicode 9.0的规范,ai表示accent insensitivity,也就是“不区分音调”,而ci表示case insensitiv…

Patch SCN一键解决ORA-600 2662故障---惜分飞

客户强制重启库之后,数据库启动报ORA-600 2037,ORA-745 kcbs_reset_pool/kcbzre1等错误 Wed Aug 09 13:25:38 2023 alter database mount exclusive Successful mount of redo thread 1, with mount id 1672229586 Database mounted in Exclusive Mode Lost write protection d…

【Docker】Docker network之bridge、host、none、container以及自定义网络的详细讲解

🚀欢迎来到本文🚀 🍉个人简介:陈童学哦,目前学习C/C、算法、Python、Java等方向,一个正在慢慢前行的普通人。 🏀系列专栏:陈童学的日记 💡其他专栏:CSTL&…

在Orangepi5开发板3588s使用opencv获取摄像头画面

先感谢香橙派群的管理员耐心指导,经过不断的调试修改最后成功通过opencv调用mipi摄像头获取画面 就记录分享一下大概步骤希望大家少踩点坑!!!!!! 我用的固件系统是ubuntu2022.0.4 固件是&#x…

Cenos7 搭建Minio最新版集群部署服务器(一)

------> 道 | 法 | 术 | 器 | 势 <------ 多台服务器间免密登录|免密拷贝 Cenos7 搭建Minio集群部署服务器(一) Cenos7 搭建Minio集群Nginx统一访问入口|反向动态代理(二) Spring Boot 与Minio整合实现文件上传与下载(三) CentOS7的journalctl日志查看方法 …