深入探索Java并发编程:ArrayBlockingQueue详解

在这里插入图片描述

码到三十五 : 个人主页

心中有诗画,指尖舞代码,目光览世界,步履越千山,人间尽值得 !


在Java的并发编程世界中,java.util.concurrent包为我们提供了多种用于线程间安全通信的数据结构,其中ArrayBlockingQueue是一个备受瞩目的有界阻塞队列。本文将全面深入地介绍ArrayBlockingQueue的内部机制、使用场景以及最佳实践。

目录

      • 一、ArrayBlockingQueue概述
      • 二、内部机制
        • 2.1. 数据结构
        • 2.2. 锁和条件变量
        • 2.3. 入队和出队操作
      • 三、使用场景
      • 四、最佳实践
      • 五、ArrayBlockingQueue实现生产者-消费者
      • 六、总结

一、ArrayBlockingQueue概述

ArrayBlockingQueue是一个基于数组的有界阻塞队列。它在创建时需要指定队列的大小,并且这个大小在之后是不能改变的。队列中的元素按照FIFO(先进先出)的原则进行排序。ArrayBlockingQueue是线程安全的,可以在多线程环境下安全地使用。

二、内部机制

2.1. 数据结构

ArrayBlockingQueue内部使用一个循环数组作为存储结构。它有两个关键索引:takeIndexputIndex,分别用于从队列中取出元素和向队列中添加元素。当添加元素时,putIndex会递增;当取出元素时,takeIndex会递增。当索引达到数组的末尾时,它们会回到数组的开头,形成一个循环。

2.2. 锁和条件变量

为了保证线程安全,ArrayBlockingQueue使用了一个重入锁(ReentrantLock)以及与之关联的条件变量(Condition)。锁用于保护队列的状态,而条件变量用于在队列为空或满时等待和通知线程。具体来说,ArrayBlockingQueue内部有两个条件变量:notEmptynotFull。当队列满时,生产者线程会等待在notFull条件变量上;当队列空时,消费者线程会等待在notEmpty条件变量上。

2.3. 入队和出队操作
  • 入队操作(put):当调用put方法向队列中添加元素时,如果队列已满,生产者线程会被阻塞,直到队列中有空闲位置。一旦有空闲位置,生产者线程会将元素添加到队列中,并通知可能在等待的消费者线程。
  • 出队操作(take):当调用take方法从队列中取出元素时,如果队列为空,消费者线程会被阻塞,直到队列中有元素可供消费。一旦有元素可供消费,消费者线程会从队列中取出元素,并通知可能在等待的生产者线程。

三、使用场景

  1. 生产者-消费者模式ArrayBlockingQueue非常适合实现生产者-消费者模式。生产者线程将元素添加到队列中,消费者线程从队列中取出元素进行处理。通过阻塞队列,可以很好地协调生产者和消费者之间的速率差异,避免资源的浪费。
  2. 限流:由于ArrayBlockingQueue是一个有界队列,它可以用于实现限流功能。当队列已满时,新的请求会被阻塞或拒绝,从而保护系统免受过多的请求冲击。
  3. 任务调度:在并发编程中,ArrayBlockingQueue可以用作任务调度器的一部分。将任务作为元素添加到队列中,然后由工作线程从队列中取出任务进行处理。这种方式可以实现任务的异步执行和资源的有效利用。

四、最佳实践

  1. 合理设置队列大小:在使用ArrayBlockingQueue时,应根据实际需求合理设置队列的大小。过小的队列可能导致频繁的阻塞和上下文切换;过大的队列可能导致内存浪费和长时间的等待。
  2. 避免在队列中存储大量数据:由于ArrayBlockingQueue是基于数组的实现,每个元素都会占用一定的内存空间。因此,应避免在队列中存储大量数据,以减少内存消耗和垃圾回收的压力。可以将数据拆分成较小的单元进行传输和处理。
  3. 注意线程安全:虽然ArrayBlockingQueue本身是线程安全的,但在使用过程中仍需注意线程安全的问题。例如,在多个线程同时访问队列时,应确保对队列的访问是原子的,以避免竞态条件和数据不一致的问题。
  4. 优雅地处理中断:当线程在等待从队列中取出元素或向队列中添加元素时,可能会被中断。在编写代码时,应优雅地处理这些中断情况,例如通过捕获InterruptedException并适当地响应中断请求。
  5. 使用try-with-resources语句:在使用ArrayBlockingQueue的迭代器时,建议使用try-with-resources语句来自动关闭迭代器。这样可以确保在迭代过程中及时释放资源,避免资源泄漏的问题。

五、ArrayBlockingQueue实现生产者-消费者

下面是一个使用ArrayBlockingQueue实现的稍微复杂的生产者-消费者示例。代码中模拟一个生产者线程生产数据,多个消费者线程消费数据的场景,并且消费者在处理完数据后会将结果存回另一个阻塞队列中以供后续处理。

import java.util.concurrent.ArrayBlockingQueue;
import java.util.concurrent.BlockingQueue;
import java.util.concurrent.ExecutorService;
import java.util.concurrent.Executors;
import java.util.concurrent.TimeUnit;
import java.util.concurrent.atomic.AtomicInteger;

public class ProducerConsumerWithArrayBlockingQueue {

    public static void main(String[] args) {
        // 创建一个容量为10的ArrayBlockingQueue作为生产者和消费者的共享队列
        BlockingQueue<Integer> queue = new ArrayBlockingQueue<>(10);
        
        // 创建一个容量为5的ArrayBlockingQueue用于存储消费者的处理结果
        BlockingQueue<Integer> resultQueue = new ArrayBlockingQueue<>(5);
        
        // 创建一个AtomicInteger作为数据生成的计数器
        AtomicInteger counter = new AtomicInteger();
        
        // 创建一个生产者线程
        Thread producer = new Thread(() -> {
            try {
                for (int i = 0; i < 20; i++) {
                    int item = counter.incrementAndGet();
                    System.out.println("生产者生产数据:" + item);
                    // 将数据放入队列中
                    queue.put(item);
                    // 稍微延迟一下,模拟生产数据的时间消耗
                    Thread.sleep(200);
                }
            } catch (InterruptedException e) {
                Thread.currentThread().interrupt();
            }
        });
        
        // 创建一个固定线程池的ExecutorService用于执行消费者任务
        ExecutorService executorService = Executors.newFixedThreadPool(3);
        
        // 提交3个消费者任务到线程池中
        for (int i = 0; i < 3; i++) {
            executorService.submit(() -> {
                try {
                    while (true) {
                        // 从队列中取出数据
                        int item = queue.take();
                        // 处理数据(此处仅打印作为示例)
                        System.out.println("消费者" + Thread.currentThread().getId() + "消费数据:" + item);
                        // 假设处理后的数据是原始数据的平方
                        int processedItem = item * item;
                        // 将处理后的结果存入结果队列中
                        resultQueue.put(processedItem);
                        // 稍微延迟一下,模拟处理数据的时间消耗
                        Thread.sleep(500);
                    }
                } catch (InterruptedException e) {
                    Thread.currentThread().interrupt();
                }
            });
        }
        
        // 启动生产者线程
        producer.start();
        
        // 等待生产者线程完成
        try {
            producer.join();
        } catch (InterruptedException e) {
            Thread.currentThread().interrupt();
        }
        
        // 关闭ExecutorService(这将导致消费者线程中断)
        executorService.shutdown();
        try {
            // 等待一段时间,让消费者线程处理剩余的数据
            if (!executorService.awaitTermination(2, TimeUnit.SECONDS)) {
                executorService.shutdownNow(); // 如果超时则强制关闭消费者线程
            }
        } catch (InterruptedException e) {
            executorService.shutdownNow();
            Thread.currentThread().interrupt();
        }
        
        // 处理结果队列中的数据(此处仅打印作为示例)
        while (!resultQueue.isEmpty()) {
            System.out.println("处理结果:" + resultQueue.poll());
        }
    }
}
  • 在上面的代码中,我们定义了两个阻塞队列queueresultQueue,一个用于生产者和消费者之间传递数据,另一个用于存储消费者的处理结果。

  • 我们还使用了一个AtomicInteger作为数据生成的计数器。生产者线程每次生产一个数据就将其放入queue中,而消费者线程则从queue中取出数据进行处理,并将处理结果放入resultQueue中。

  • 最后,我们在主线程中等待生产者线程完成后,关闭消费者线程的ExecutorService,并处理resultQueue中的剩余数据。

需要注意的是,在实际的生产环境中,消费者线程通常会有退出条件,而不是无限循环地处理数据。在这个示例中,由于我们设置了executorService.awaitTermination的超时时间,所以当超时发生时,会强制关闭消费者线程。但是,在更复杂的场景下,我们可能需要使用其他机制来优雅地关闭消费者线程,例如使用一个特殊的结束信号或定期检查某个关闭标志。

请注意,在ArrayBlockingQueue中,queue.isEmpty()并不是一个可靠的退出条件,因为在多线程环境下,你可能会遇到竞态条件的问题。更可靠的方式是使用一个特殊的结束信号或定期检查某个关闭标志来退出循环。

六、总结

ArrayBlockingQueue是Java并发编程中一个非常有用的数据结构。它提供了一个高效、线程安全的有界阻塞队列实现,适用于多种场景如生产者-消费者模式、限流和任务调度等。在使用过程中,我们应注意合理设置队列大小、避免存储大量数据、注意线程安全、优雅地处理中断以及使用try-with-resources语句等最佳实践。通过深入了解ArrayBlockingQueue的内部机制和最佳实践,我们可以更好地利用它来解决并发编程中的挑战。

我的博客即将同步至腾讯云开发者社区,邀请大家一同入驻

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/461423.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

PTA冰岛人

作者 陈越 单位 浙江大学 2018年世界杯&#xff0c;冰岛队因1:1平了强大的阿根廷队而一战成名。好事者发现冰岛人的名字后面似乎都有个“松”&#xff08;son&#xff09;&#xff0c;于是有网友科普如下&#xff1a; 冰岛人沿用的是维京人古老的父系姓制&#xff0c;孩子的姓…

【研发日记】Matlab/Simulink技能解锁(二)——在Matlab Function编辑窗口Debug

文章目录 前言 行断点 条件断点 按行步进 Watch Value 分析和应用 总结 前言 见《【研发日记】Matlab/Simulink技能解锁(一)——在Simulink编辑窗口Debug》 行断点 当Matlab Function出现异常时&#xff0c;如果能确定大致的代码段&#xff0c;就可以在相应的行上设置一…

为什么单线程的 Redis 能那么快?

大家好我是苏麟 , 给大家找一些好的文章看看 . 原文文章 : 03 高性能IO模型&#xff1a;为什么单线程Redis能那么快&#xff1f; (lianglianglee.com) Redis 为什么用单线程&#xff1f; 要更好地理解 Redis 为什么用单线程&#xff0c;我们就要先了解多线程的开销。 多线程的…

算法打卡day18|二叉树篇07|Leetcode 530.二叉搜索树的最小绝对差、501.二叉搜索树中的众数、236. 二叉树的最近公共祖先

算法题 Leetcode 530.二叉搜索树的最小绝对差 题目链接:530.二叉搜索树的最小绝对差 大佬视频讲解&#xff1a;二叉搜索树的最小绝对差视频讲解 个人思路 因为是在二叉搜索树求绝对差&#xff0c;而二叉搜索树是有序的&#xff0c;那就把它想成在一个有序数组上求最值&…

CVE-2019-5782:kArgumentsLengthType 设置偏小导致优化阶段可以错误的去除 CheckBound 节点

文章目录 环境搭建漏洞分析笔者初分析笔者再分析漏洞触发源码分析 漏洞利用总结 环境搭建 sudo apt install pythongit reset --hard b474b3102bd4a95eafcdb68e0e44656046132bc9 export DEPOT_TOOLS_UPDATE0 gclient sync -D// debug version tools/dev/v8gen.py x64.debug ni…

分布式调用与高并发处理(二)| Dubbo

文章目录 Dubbo概念_什么是分布式系统单机架构集群架构分布式架构单机、集群和分布式的区别 Dubbo概念_什么是RPCRPC两个作用&#xff1a;常见 RPC 技术和框架&#xff1a; Dubbo概念_简介Dubbo能做什么Dubbo支持的协议 Dubbo概念_核心组件注册中心Registry服务提供者Provider服…

Cartwheel——文本生成3D动作或动画的工具

一个强大的文本转3D动画平台,用户只需通过输入文字提示即可生成视频、游戏、电影、广告、社交或VR项目所需的3D动画角色。 Cartwheel 是一个功能强大的文本到动画平台。只需键入即可为您的视频、游戏、电影、广告、社交或 VR 项目制作角色动画 定位: 定位于为用户提供简单…

Java学习笔记(13)

阶段项目 拼图小游戏 JFrame JMenuBar JMenu JMenuItem 用add方法添加到不同的对象中 添加图片 先创建一个图片ImageIcon的对象&#xff0c;写入图片的路径 再创建JLabel管理容器对象&#xff0c;把图片放到这个容器中&#xff0c;再把容器添加到界面 界面坐标位置 改变图…

MySQL数据导入的方式介绍

MySQL数据库中的数据导入是一个常见操作&#xff0c;它涉及将数据从外部源转移到MySQL数据库表中。在本教程中&#xff0c;我们将探讨几种常见的数据导入方式&#xff0c;包括它们的特点、使用场景以及简单的示例。 1. 命令行导入 使用MySQL命令行工具mysql是导入数据的…

pycharm @NotNull parameter ‘module‘ of ...

下载了最新pycharm &#xff0c;无法启动运行 pycharm或者idea中Run/Debug Python项目报错 Argument for NotNull parameter ‘module‘ of … 解决方案 删除项目根目录的 idea 文件夹 随后重启&#xff0c;重新配置即可

vue项目中使用highcharts记录(甘特图)

使用npm添加到项目中&#xff1a; npm install highcharts npm install highcharts-vue// 我在实际使用时用上面两条命令安装后&#xff0c;引入时会报错 // 所以按照下面的示例中的版本安装的指定版本(vue版本为2.6.14)npm install highcharts7.1.3 npm install highchart…

计算机考研|跨专业考408到底有多难?

在就是说&#xff0c;敢跨专业考研的&#xff0c;都是狠人 为什么这么说&#xff0c;因为考研备考最多也就一年的时间&#xff0c;然后还要处理自己本专业的事情&#xff0c;还要学习心得&#xff0c;从来没有接触过的专业课&#xff0c;那真的就是抓瞎啊。这绝对要很强的时间…

【刷题训练】Leetcode415.字符串相加

字符串相加 题目要求 示例 1&#xff1a; 输入&#xff1a;num1 “11”, num2 “123” 输出&#xff1a;“134” 示例 2&#xff1a; 输入&#xff1a;num1 “456”, num2 “77” 输出&#xff1a;“533” 示例 3&#xff1a; 输入&#xff1a;num1 “0”, num2 “0”…

二、HarmonyOS 操作系统以及相关生态

前言 2019年8月9日&#xff0c;华为技术有限公司在华为开发者大会上正式发布了HarmonyOS 1.0&#xff0c;同时宣布该操作系统源代码开源。 2020年9月10日&#xff0c;HarmonyOs 2.0正式发布。与HarmonyOs 1.0版本相比&#xff0c;HarmonyOs 2.0在分布式软总线、分布式数据管理、…

智慧公厕——旅游景区的高端必备设施

随着旅游行业的迅猛发展&#xff0c;越来越多的人选择在假期中出游&#xff0c;寻找美好的旅行体验。而一个良好的旅游景区必须拥有完善的基础设施&#xff0c;其中智慧公厕则是不可或缺的一环。智慧公厕源头厂家广州中期科技有限公司&#xff0c;已经打造了大量精品工程&#…

JVMJava虚拟机

JVM的内存区域 程序计数器&#xff1a; 字节码解释器通过改变程序计数器来依次读取指令&#xff0c;从而实现代码的流程控制&#xff0c;如&#xff1a;顺序执行、选择、循环、异常处理。 在多线程的情况下&#xff0c;程序计数器用于记录当前线程执行的位置&#xff0c;从而当…

01——LenNet网络结构,图片识别

目录 1、model.py文件 &#xff08;预训练的模型&#xff09; 2、train.py文件&#xff08;会产生训练好的.th文件&#xff09; 3、predict.py文件&#xff08;预测文件&#xff09; 4、结果展示&#xff1a; 1、model.py文件 &#xff08;预训练的模型&#xff09; impor…

Day17 深入类加载机制

Day17 深入类加载机制 文章目录 Day17 深入类加载机制一、初识类加载过程二、深入类加载过程三、利用类加载过程理解面试题四、类加载器五、类加载器分类六、类加载器之间的层次关系七、双亲委派模型 - 概念八、双亲委派模型 - 工作过程九、双亲委派模型 - 好处十、双亲委派原则…

Jmeter---分布式

分布式&#xff1a;多台机协作&#xff0c;以集群的方式完成测试任务&#xff0c;可以提高测试效率。 分布式架构&#xff1a;控制机&#xff08;分发任务&#xff09;与多台执行机&#xff08;执行任务&#xff09; 环境搭建&#xff1a; 不同的测试机上安装 Jmeter 配置基…

Sparse Convolution 讲解

文章目录 1. 标准卷积与Sparse Conv对比(1)普通卷积(2) 稀疏卷积(3) 改进的稀疏卷积(subm)2 Sparse Conv 官方API3. Sparse Conv 计算3. 1 Sparse Conv 计算流程3. 2 案例3.2.1 普通稀疏卷积3.2.2 subm模式的稀疏卷积3D点云数据非常稀疏,尤其体素化处理后(比如200k的点放…