DelayQueue原理分析

2024-05-24 19:52
文章标签 分析 原理 delayqueue

本文主要是介绍DelayQueue原理分析,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1.简介

DelayQueue同样也是适用于并发环境下的容器之一,该容器属于阻塞队列的一种,其底层数据结构是PriorityQueue,主要应用于执行定时任务和缓存过期删除的场景。
DelayQueue也是线程安全的,它通过内部的ReentrantLock实现了线程间的互斥访问。
DelayQueue要求其内部元素必须实现Delayed接口,并重写getDelay方法。默认情况下,DelayQueue会按照元素的到期时间进行升序排列,且仅当元素到期(getDelay() <= 0)时,才能取出该元素。

2.实现原理

  • 为了实现延时的语义,其内部采用PriorityQueue进行延时任务的存储与管理,通过强制每个元素实现Delayed接口以实现getDelaycompareTo方法,从而实现了延时低的任务优先被执行的目标。
  • 内部设置了一把ReentrantLock,从而实现了进程间的互斥访问,线程安全性得到保证。
  • 内部还配有Condition,通过awaitsignal方法来完成多线程间的唤醒与等待。

3.源码分析

3.1 类定义

DelayQueue的类定义(JDK17)")
DelayQueue继承自AbstractQueue,因此具有一些基本的队列的增删改查的模板操作;
同时,它还实现了BlockQueue接口,因此该队列将具备阻塞队列的一些性质。
此外,我们还注意到,DelayQueue的泛型参数必须为Delayed接口的子类,这也印证了我们上面所说的一点:DelayQueue的元素必须强制实现Delayed接口。
同时,Delayed接口又继承了Comparable接口,因此,DelayQueue中的元素天然具有可排序的特性。

Q:为什么要强制队列元素实现Delayed接口?
A
实现Delayed接口,具体来讲是实现其要求的getDelaycompareTo这两个方法。

  • 实现getDelay方法:用于指示延时任务的剩余延迟时间,作为执行线程衡量该延时任务目前能不能够被执行的标准。
  • 实现compareTo方法:用于作为内部PriorityQueue的排序标准,用于比较任务的优先级,以编排好当前延时任务队列的正确的执行顺序。

DelayQueue的继承实现链(JDK17)")

3.2 初始化

DelayQueue的构造方法源码(JDK17)")
构造方法逻辑很简单,对于有参构造函数,它将调用addAll方法,而在addAll中,待要添加的集合校验通过后,遍历整个集合并挨个儿调用add方法,而在add方法中又调用了offer方法,这个我们待会细说,最终如果一切没问题的话,那么modified将被置为true并返回,否则,只要有一个元素添加失败就会抛异常(往往是由于队列满导致的)。
调用链:有参构造 --> addAll --> 遍历调用add --> offer

3.3 关键字段说明

DelayQueue类中的部分关键字段(JDK17)")

  • qDelayQueue的核心,也是其底层数据结构,用于存放延时任务,后续任务的添加与执行都是要靠它来完成的。同时它作为一个优先级队列,会将任务按照其延时时间(通过重写Delayed接口的父接口Comparable中的compareTo方法)进行升序排序。
  • leader:执行延时任务的唯一线程,以防止多个线程争抢而使任务执行效率降低。(相当于领导者-追随者模式中的领导者)
  • available:唤醒因到来的时候队列为空而等待或者到来时已经有其他线程在处理任务而等待的线程或者满足这些条件而阻塞,实现了工作线程间的阻塞与唤醒。

3.4 添加

DelayQueue的部分添加(生产)元素的方法(JDK17)元素的方法(JDK17)")
你会发现,不论是add方法还是put方法,都是直接调用的offer方法,因此,这里我们只分析offer执行流程

  1. 加锁。
  2. 调用内部PriorityQueue上的offer方法添加元素。
  3. 判断添加了该元素后的PriorityQueue中的头部元素是不是当前添加进入的元素(即当前所添加的元素是不是延时最短的那个),若是,则置leader线程为null,同时唤醒阻塞在available条件上的线程;否则,不做任何处理。
  4. 释放锁。

3.5 删除(执行延时任务)

DelayQueue的执行延时任务的方法(JDK17)")
**poll**方法的执行流程

  1. 加锁。
  2. 调用PriorityQueuepeek方法,试探性的取一下队头元素。
  3. 若发现队头元素(延时任务)为null或者还没到达预定的延时时间,则返回null;否则,调用poll方法将该元素出队并返回。
  4. 释放锁。

**take**方法的执行流程

  1. 加锁。
  2. 试探性的取到队列的头部元素:
    1. 如果头部元素为null,则说明队列目前没有延时任务可供消费,因此阻塞在available条件上。
    2. 若头部元素不为null
      1. 如果该元素已到达或者超过延时时间,则调用poll方法出队并返回。
      2. 若还未到达延时时间,则查看一下当前领导者线程是否为空:
        1. 若不为空,则说明目前已经有线程正在处理延时任务,因此我们需要阻塞等待,因此在available条件上阻塞。
        2. 若为空,则令当前线程作为领导者线程,然后阻塞等待至预定的延时执行时间,等待一段时间后,再次将主线程置为null,然后进入到for循环的下一次循环,进入到b -> i分支,处理延时任务(这也是为什么设置for循环的原因)。
  3. 最后的最后,如果领导者线程为null并且队列中还有延时任务,则随机唤醒阻塞在available条件上的线程以进行下一个延时任务的等待&处理。
  4. 释放锁。

上述过程其实用到了一个设计模式:领导者-追随者模式。

通过过程分析,不难发现,poll是非阻塞式删除,take是阻塞式删除。

3.6 获取

DelayQueue的获取但不移除元素的方法(JDK17)")
执行流程

  1. 加锁。
  2. 调用PriorityQueuepeek方法,然后直接返回该元素。
  3. 释放锁。

3.7 获取元素数量

DelayQueue的获取元素数量的方法(JDK17)")
执行流程

  1. 加锁。
  2. 调用PriorityQueuesize方法并返回。
  3. 释放锁。

4.评估

如果线程数量过少,且处理的任务耗时较长,而后续延时任务的到期时间相对集中,那么可能会使得后面的延时任务出现延期处理的情况。
线程数量过多也不见得是一件好事,因为这将在线程调度、同步方面花费更多的时间。
(当然,DelayQueue的工作线程的数量固定为1,上面是针对[领导者-追随者模式](https://www.yuque.com/jujingyi-mzjzr/ybr4gh/ix3ifmtyb3rfllxf) + DelayQueue而言的)

参考文档

DelayQueue 源码分析
Java 延迟队列 DelayQueue 的原理

这篇关于DelayQueue原理分析的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/999376

相关文章

ShardingProxy读写分离之原理、配置与实践过程

《ShardingProxy读写分离之原理、配置与实践过程》ShardingProxy是ApacheShardingSphere的数据库中间件,通过三层架构实现读写分离,解决高并发场景下数据库性能瓶... 目录一、ShardingProxy技术定位与读写分离核心价值1.1 技术定位1.2 读写分离核心价值二

深度解析Python中递归下降解析器的原理与实现

《深度解析Python中递归下降解析器的原理与实现》在编译器设计、配置文件处理和数据转换领域,递归下降解析器是最常用且最直观的解析技术,本文将详细介绍递归下降解析器的原理与实现,感兴趣的小伙伴可以跟随... 目录引言:解析器的核心价值一、递归下降解析器基础1.1 核心概念解析1.2 基本架构二、简单算术表达

深入浅出Spring中的@Autowired自动注入的工作原理及实践应用

《深入浅出Spring中的@Autowired自动注入的工作原理及实践应用》在Spring框架的学习旅程中,@Autowired无疑是一个高频出现却又让初学者头疼的注解,它看似简单,却蕴含着Sprin... 目录深入浅出Spring中的@Autowired:自动注入的奥秘什么是依赖注入?@Autowired

从原理到实战解析Java Stream 的并行流性能优化

《从原理到实战解析JavaStream的并行流性能优化》本文给大家介绍JavaStream的并行流性能优化:从原理到实战的全攻略,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的... 目录一、并行流的核心原理与适用场景二、性能优化的核心策略1. 合理设置并行度:打破默认阈值2. 避免装箱

Python中的filter() 函数的工作原理及应用技巧

《Python中的filter()函数的工作原理及应用技巧》Python的filter()函数用于筛选序列元素,返回迭代器,适合函数式编程,相比列表推导式,内存更优,尤其适用于大数据集,结合lamb... 目录前言一、基本概念基本语法二、使用方式1. 使用 lambda 函数2. 使用普通函数3. 使用 N

MyBatis-Plus 与 Spring Boot 集成原理实战示例

《MyBatis-Plus与SpringBoot集成原理实战示例》MyBatis-Plus通过自动配置与核心组件集成SpringBoot实现零配置,提供分页、逻辑删除等插件化功能,增强MyBa... 目录 一、MyBATis-Plus 简介 二、集成方式(Spring Boot)1. 引入依赖 三、核心机制

redis和redission分布式锁原理及区别说明

《redis和redission分布式锁原理及区别说明》文章对比了synchronized、乐观锁、Redis分布式锁及Redission锁的原理与区别,指出在集群环境下synchronized失效,... 目录Redis和redission分布式锁原理及区别1、有的同伴想到了synchronized关键字

Android 缓存日志Logcat导出与分析最佳实践

《Android缓存日志Logcat导出与分析最佳实践》本文全面介绍AndroidLogcat缓存日志的导出与分析方法,涵盖按进程、缓冲区类型及日志级别过滤,自动化工具使用,常见问题解决方案和最佳实... 目录android 缓存日志(Logcat)导出与分析全攻略为什么要导出缓存日志?按需过滤导出1. 按

Linux中的HTTPS协议原理分析

《Linux中的HTTPS协议原理分析》文章解释了HTTPS的必要性:HTTP明文传输易被篡改和劫持,HTTPS通过非对称加密协商对称密钥、CA证书认证和混合加密机制,有效防范中间人攻击,保障通信安全... 目录一、什么是加密和解密?二、为什么需要加密?三、常见的加密方式3.1 对称加密3.2非对称加密四、

MySQL中读写分离方案对比分析与选型建议

《MySQL中读写分离方案对比分析与选型建议》MySQL读写分离是提升数据库可用性和性能的常见手段,本文将围绕现实生产环境中常见的几种读写分离模式进行系统对比,希望对大家有所帮助... 目录一、问题背景介绍二、多种解决方案对比2.1 原生mysql主从复制2.2 Proxy层中间件:ProxySQL2.3