并发编程-系统学习篇

news2024/11/18 3:46:29

 

并发编程的掌握过程并不容易。 我相信为了解决这个问题,你也听别人总结过:并发编程的第 一原则, 那就是不要写并发程序

这个原则在我刚毕业的那几年曾经是行得通的,那个时候多核服务器还是一种奢侈品,系统的并发量也很低,借助数据库和类似 Tomcat 这种中间 件,我们基本上不用写并发程序。 或者说, 并发问题基本上都被中间件和数据库解决了

 

Java 经过这些年的发展, Java SDK 并发包提供了非常丰富的功能,对于初学者来说 可谓是眼花缭乱,好多人觉得无从下手。 但是,Java SDK 并发包乃是并发大师 Doug Lea 出品堪称经典, 它内部一定是有章可循的。 那它的章法在哪里呢? 

其实并发编程可以总结为三个核心问题:

  • 分工
  • 同步
  • 互斥

分工,指的是如何高效地拆解任务并分配给线程

同步,指的是线程之间如何协作, 

互斥 则是保证同一时刻只允许一个线程访问共享资源

Java SDK 并发包很大部分内容都是按照这三个维度组织的, 例如 Fork/Join 框架就是一种分工模式, CountDownLatch 就是一种 典型的同步方式, 而可重入锁则是一种互斥手段。 

当把并发编程核心的问题搞清楚, 再回过头来看 Java SDK 并发包, 你会感觉豁然开朗, 它不过是针对并发问题开发出来的工具而已, 此时的 SDK 并发包可以任你 “盘” 了。 而且,这三个核心问题是跨语言的,你如果要学习其他语言的并发编程类库,完全可以顺着 这三个问题按图索骥。 Java SDK 并发包其余的一部分则是并发容器和原子类,这些比较容易理解,属于辅助工具, 其他语言里基本都能找到对应的

 

 

并发编程并不是一门相对独立的学科, 而是一个综合学科。并发编程相关的概念和技术看上 非常零散,相关度也很低, 总给你一种这样的感觉:我已经学习很多相关技术了,可还是搞 不定并发编程。 那如何才能学习好并发编程呢? 其实很简单, 只要你能从两个方面突破一下就可以了。 一个是“跳出来, 看全景” , 另一个是“钻进去,看本质” 。 

跳出来,看全景 

我们先说“跳出来” 。 你应该也知道,学习最忌讳的就是“盲人摸象” , 只看到局部, 而没有看到全局。 所以, 你需要从一个个单一的知识和技术中 “跳出来” , 高屋建瓴地看并发编 程。 当然,这首要之事就是你建立起一张全景图

在我看来,并发编程领域可以抽象成 三个核心问题: 分工、同步和互斥 。 

1. 分工 

所谓分工,类似于现实中一个组织完成一个项目, 项目经理要拆分任务, 安排合适的成员去 完成。 在并发编程领域,你就是项目经理, 线程就是项目组成员。 任务分解和分工对于项目成败非 常关键, 不过在并发领域里, 分工更重要, 它直接决定了并发程序的性能。 在现实世界里, 分工是很复杂的, 著名数学家华罗庚曾用 “烧水泡茶” 的例子通俗地讲解了统筹方法(一种 安排工作进程的数学方法) , “烧水泡茶” 这么简单的事情都这么多说道, 更何况是并发编 程里的工程问题呢。 

既然分工很重要又很复杂,那一定有前辈努力尝试解决过, 并且也一定有成果。的确,在并 发编程领域这方面的成果还是很丰硕的。 Java SDK 并发包里的 Executor、 Fork/Join、 Future 本质上都是一种分工方法。 除此之外, 并发编程领域还总结了一些设计模式, 基本 上都是和分工方法相关的, 例如生产者 - 消费者、 Thread-Per-Message、 Worker Thread 模式等都是用来指导你如何分工的。 

学习这部分内容,最佳的方式就是和现实世界做对比。 例如生产者 - 消费者模式,可以类比一下餐馆里的大厨和服务员, 大厨就是生产者, 负责做菜, 做完放到出菜口, 而服务员就是消费者, 把做好的菜给你端过来。 不过, 我们经常会发现, 出菜口有时候一下子出了好几个菜, 服务员是可以把这一批菜同时端给你的。 其实这就是生产者 - 消费者模式的一个优点, 生产者一个一个地生产数据, 而消费者可以批处理, 这样就提高了性能。 

2. 同步 

分好工之后, 就是具体执行了。 在项目执行过程中, 任务之间是有依赖的, 一个任务结束 后, 依赖它的后续任务就可以开工了, 后续工作怎么知道可以开工了呢?这个就是靠沟通协作,在并发编程领域里的同步,主要指的就是线程间的协作, 本质上和现实生活中的协作没区别, 不过是 一个线程执行完了一个任务,如何通知执行后续任务的线程开工而已。 协作一般是和分工相关的。 Java SDK 并发包里的 Executor、 Fork/Join、 Future 本质上都是分工方法,但同时也能解决线程协作的问题。 例如, 用 Future 可以发起一个异步调用, 当主线程通过 get() 方法取结果时,主线程就会等待,当异步执行的结果返回时, get() 方法就自动返回了。 主线程和异步线程之间的协作, Future 工具类已经帮我们解决了。 除此之外, Java SDK 里提供的 CountDownLatch、 CyclicBarrier、 Phaser、 Exchanger 也都是用来解决线程协作问题的。 不过还有很多场景, 是需要你自己来处理线程之间的协作的。 工作中遇到的线程协作问题, 基本上都可以描述为这样的一个问题: 当某个条件不满足时,线程需要等待,当某个条件满足时, 线程需要被唤醒执行 。 例如, 在生产者 - 消费者模型 里, 也有类似的描述, “当队列满时, 生产者线程等待, 当队列不满时, 生产者线程需要被 唤醒执行; 当队列空时, 消费者线程等待, 当队列不空时, 消费者线程需要被唤醒执行。 ” 

在 Java 并发编程领域, 解决协作问题的核心技术是 管程 , 上面提到的所有线程协作技术底层都是利用管程解决的。 管程是一种解决并发问题的通用模型, 除了能解决线程协作问题,还能解决下面我们将要介绍的互斥问题。 可以这么说,管程是解决并发问题的万能钥匙 。 

所以说, 这部分内容的学习, 关键是理解管程模型, 学好它就可以解决所有问题。 其次是了 解 Java SDK 并发包提供的几个线程协作的工具类的应用场景, 用好它们可以妥妥地提高你 的工作效率。 

3. 互斥 

分工、 同步主要强调的是性能, 但并发程序里还有一部分是关于正确性的, 用专业术语 叫 “ 线程安全 ” 。 并发程序里, 当多个线程同时访问同一个共享变量的时候, 结果是不确定的。 不确定, 则意味着可能正确, 也可能错误,事先是不知道的。 而导致不确定的主要源头是可见性问题、 有序性问题和原子性问题, 为了解决这三个问题, Java 语言引入了内存模型, 内存模型提供了一系列的规则, 利用这些规则, 我们可以避免可见性问题、 有序性问题, 但是还不足以完全解决线程安全问题。 解决线程安全问题的核心方案还是互斥。 所谓互斥,指的是同一时刻, 只允许一个线程访问共享变量

实现互斥的核心技术就是锁, Java 语言里 synchronized、 SDK 里的各种 Lock 都能解决互 斥问题。 虽说锁解决了安全性问题, 但同时也带来了性能问题, 那如何保证安全性的同时又 尽量提高性能呢?可以分场景优化, Java SDK 里提供的 ReadWriteLock、 StampedLock 就可以优化读多写少场景下锁的性能。 还可以使用无锁的数据结构, 例如 Java SDK 里提供 的原子类都是基于无锁技术实现的。 除此之外, 还有一些其他的方案, 原理是不共享变量或者变量只允许读。 这方面, Java 提 供了 Thread Local 和 final 关键字, 还有一种 Copy-on-write 的模式。 

使用锁除了要注意性能问题外,还需要注意死锁问题。 

这部分内容比较复杂, 往往还是跨领域的, 例如要理解可见性, 就需要了解一些 CPU 和缓 存的知识; 要理解原子性, 就需要理解一些操作系统的知识; 很多无锁算法的实现往往也需 要理解 CPU 缓存。 这部分内容的学习, 需要博览群书, 在大脑里建立起 CPU、 内存、 I /O 执行的模拟器。 这样遇到问题就能得心应手了。 跳出来, 看全景, 可以让你的知识成体系, 所学知识也融汇贯通起来, 由点成线,由线及面, 画出自己的知识全景图。

f29dc519228243ad82b213b5ac74dc53.png

 

钻进去,看本质 

但是光跳出来还不够, 还需要下一步, 就是在某个问题上钻进去, 深入理解, 找到本质。 就拿我个人来说, 我已经烦透了去讲述或被讲述一堆概念和结论, 而不分析这些概念和结论 是怎么来的, 以及它们是用来解决什么问题的。 在大学里, 这样的教材很流行, 直接导致了芸芸学子成绩很高, 但解决问题的能力很差。 其实, 知其然知其所以然, 才算真的学明白 了。 

我属于理论派,我认为工程上的解决方案,一定要有理论做基础 。 所以在学习并发编程的过程中,我都会探索它背后的理论是什么。 比如,当看到 Java SDK 里面的条件变量 Condition 的时候,我会下意识地问,“它是从哪儿来的?是 Java 的特有概念,还是一个通用的编程概念?” 当我知道它来自管程的时候,我又会问,“管程被提出的背景和解决的问题是什么?”这样一路探索下来, 我发现 Java 语言里的并发技术基本都是有理论基础的,并且这些理论在其他编程语言里也有类似的实现。所以我认为,技术的本质是背后的理论模型

 

注:

从性能角度讲,我们为了提高执行一定计算机任务的效率,所以IO等待的时候不能让cpu闲着,所以我们把任务拆分交替执行,有了分时操作系统,出现了并发,后来cpu多核有了并行计算。 这里也就是作者说的[分工]

分工以后我们为了进一步提升效率和更加灵活地达到目的, 所以我们要对任务进行组织编排, 也就是对线程组织编排。 于是线程之间需要通信, 于是操作系统提供了一些让进程,线程之间通信的方式。 也就是作者说的[同步]

 

 

 

01 | 可见性、原子性和有序性问题:并发编程Bug的源头

 

 

 

 

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/604545.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

沙盒不再高端,Windows11将自带沙盒让程序检测更方便

Windows 沙盒提供了轻型桌面环境,可以安全地在隔离状态下运行应用程序。 安装在 Windows 沙盒环境下的软件保持“沙盒”状态,并且与主机分开运行。 沙盒是临时的。 当关闭沙盒后,系统将删除所有软件和文件以及状态。 每次使用时,…

AWK常用用法

awk简介 awk其名称得自于它的创始人 Alfred Aho 、Peter Weinberger 和 Brian Kernighan 姓氏的首个字母。实际上 AWK 的确拥有自己的语言: AWK 程序设计语言 , 三位创建者已将它正式定义为“样式扫描和处理语言”。它允许您创建简短的程序,…

解决一个典型的商业案例研究任务

介绍 印尼的一家公司 Gojek 通过移动应用程序提供运输和物流、食品和购物、支付、日常需求、商业、新闻和娱乐等服务,对经济做出了超过70亿美元的贡献。 它拥有 90 万注册商户、超过 1.9 亿次应用下载以及超过 200 万名司机能够在120分钟内完成超过18万个订单。我们…

chatgpt赋能python:Python创建界面的重要性及实现方法

Python创建界面的重要性及实现方法 作为一名有10年Python编程经验的工程师,我深知Python在Web开发、数据分析和人工智能等方面的强大表现。然而,Python对于前端的支持一直是一个不被关注的领域。 随着网站、移动应用和电脑软件的普及,用户对…

Find My产品|Targus推出最新支持苹果Find My双肩包

Targus宣布推出 Cypress Hero Backpack 双肩包,最大的亮点在于支持苹果“Find My”,在丢失后可定位追踪。 Targus这款双肩包采用了环保材料,可以妥善地保护笔记本电脑,并提供丰富的收纳袋存放各种配件和物品。这款双肩包内置带衬…

Unity Addressables学习笔记(3)---加载远程场景Scenes

前言 Unity Addressables学习笔记—汇总 正文 1.创建一个新场景 我是创建在Resources/Scenes目录下,如图: 2.为场景创建一个Addressables的Group Game1Group就是我新创建的一个Group用来存放场景1的所有资源,分组的配置跟Remote一样&a…

vue 读取本地文件

1. vue读取本地文件 2.在文件夹下添加一个类 3.读取本地文件,先读取文件的内容 4.在 body下添加一个属性 5.读取后,写到 setTimeout方法中,返回一个错误信息。 6. restart方法,在组件渲染时调用 7. return setTimeout &#xff08…

使用Redis的zset集合实现小程序的滚动分页

一、 Redis中,使用有序集合(sorted set)实现滚动分页的原理如下: 将每个文档的 score 值设置为时间戳(或根据其他规则计算的分数),将文档的 ID 作为 value,然后将其添加到有序集合中…

delphi 开发虚拟摄像头

用directshow创建一个虚拟摄像头 然后注册到系统, 在用一个main app 调用摄像头,往里面写流, 可以是屏幕录制,可以是播放的多媒体文件 然后具体是要实现录屏,或者播放多媒体文件,在虚拟摄像头插件中fil…

Godot 4 源码分析 - 初探

准备研究GoDot 4源码。 源码下载 获取源代码 在进入 SCons 构建系统并编译 Godot 之前,你需要将 Godot 的源代码下载到本地。 源代码位于 GitHub 上, 虽然你可以通过网站手动下载它, 但是通常你希望通过 git 版本控制系统来下载. 如果你是为了做贡献或拉动请求…

国产新秀---XS5018A,芯昇,图像信号处理芯片

国产视频处理芯片,大崛起。 XS5018A 是一款针对 CMOS 图像传感器的高性价比图像信号处理芯片,支持 1M/2M 像素 图像传感器,一组 10-bit DVP 输入接口, ISP 具备优异的 3D 降噪功能,标清模拟输出支持 960…

Java官方笔记6继承

继承 Java只有单继承,最顶级的父类是Object。 子类会继承父类的fields和methods,而不会继承constructors,因为constructors不属于methods,但是子类可以通过super调用父类的constructor。 子类继承父类的范围是:public、…

记录--让URL地址都变成了ooooooooo

这里给大家分享我在网上总结出来的一些知识,希望对大家有所帮助 发现一个很有创意的小工具网站,如封面图所示功能很简单,就是将一个URL地址转换为都是 ooooooooo 的样子,通过转换后的地址访问可以转换回到原始地址,简单…

chatgpt赋能python:Python创建Word文档指南

Python创建Word文档指南 在今天的数字时代,Word文档仍然是最常见和使用的文档类型之一。Python是一个强大的编程语言,可以用于自动化创建各种类型的文档,包括Word文档。在本篇文章中,我们将介绍如何使用Python创建Word文档&#…

Rust每日一练(Leetday0019) 跳跃游戏、合并区间、插入区间

目录 55. 跳跃游戏 Jump Game 🌟🌟 56. 合并区间 Mmerge Intervals 🌟🌟 57. 插入区间 Insert Interval 🌟🌟 🌟 每日一练刷题专栏 🌟 Rust每日一练 专栏 Golang每日一练 专…

KP3114电源IC介绍--【其利天下】

KP3114 是一款高性能低成本 PWM 控制功率开关,适用于离线式小功率降压型应用场合,外围电路简单、器件个数少。同时产品内置高耐压 MOSFET 可提高系统浪涌耐受能力。 与传统的 PWM 控制器不同,KP3114 内部无固定时钟驱动 MOSFET,系…

为什么陶瓷板视觉技术会越来越受到人们的青睐?

随着科技的不断进步和应用,陶瓷板视觉技术越来越受到人们的青睐。陶瓷板视觉技术是一种新型的非接触式检测技术,它可以在生产过程中对产品进行高效、准确的检测和质量控制。下面我们来详细了解一下陶瓷板视觉技术的优势和应用。 一、优势 1.高效性 陶…

10款抓包工具优缺点对比

1. Wireshark 介绍:Wireshark是一个免费的网络协议分析工具,支持Windows、macOS和Linux等多个平台。它可以捕获和分析网络数据包,支持多种网络协议解码。优点:功能强大、支持多种协议解码、支持多平台、过滤器功能强大、免费开源。…

QT+OpenGL实例化和抗锯齿

QTOpenGL实例化和抗锯齿 本篇完整工程见gitee:QtOpenGL 对应点的tag&#xff0c;由turbolove提供技术支持&#xff0c;您可以关注博主或者私信博主 实例化 如果我们需要渲染大量物体时&#xff0c; 代码看起来会像这样&#xff1a; for(int i 0; i < amount; i) {DoSom…

Mybatis 别名的配置 + Mybatis配置类的调查

参考资料 Mybatis配置类别名mybatis-spring-boot-autoconfigure类型别名&#xff08;typeAliases&#xff09;SpringBoot五步配置Mybatis超简教程 目录 一. 使用场景二. 前期准备2.1 实体类2.2 查询接口 三. 配置方式1 配置文件的方式3.1 application.yml文件3.2 SQL的XMl文件…