细粒度锁的实现

2024-09-08 01:08
文章标签 实现 细粒度

本文主要是介绍细粒度锁的实现,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

 最近在工作上碰见了一些高并发的场景需要加锁来保证业务逻辑的正确性,并且要求加锁后性能不能受到太大的影响。初步的想法是通过数据的时间戳,id等关键字来加锁,从而保证不同类型数据处理的并发性。而java自身api提供的锁粒度太大,很难同时满足这些需求,于是自己动手写了几个简单的扩展...

    1. 分段锁

        借鉴concurrentHashMap的分段思想,先生成一定数量的锁,具体使用的时候再根据key来返回对应的lock。这是几个实现里最简单,性能最高,也是最终被采用的锁策略,代码如下:

/*** 分段锁,系统提供一定数量的原始锁,根据传入对象的哈希值获取对应的锁并加锁* 注意:要锁的对象的哈希值如果发生改变,有可能导致锁无法成功释放!!!*/
public class SegmentLock<T> {private Integer segments = 16;//默认分段数量private final HashMap<Integer, ReentrantLock> lockMap = new HashMap<>();public SegmentLock() {init(null, false);}public SegmentLock(Integer counts, boolean fair) {init(counts, fair);}private void init(Integer counts, boolean fair) {if (counts != null) {segments = counts;}for (int i = 0; i < segments; i++) {lockMap.put(i, new ReentrantLock(fair));}}public void lock(T key) {ReentrantLock lock = lockMap.get((key.hashCode()>>>1) % segments);lock.lock();}public void unlock(T key) {ReentrantLock lock = lockMap.get((key.hashCode()>>>1) % segments);lock.unlock();}
}

    2. 哈希锁

        上述分段锁的基础上发展起来的第二种锁策略,目的是实现真正意义上的细粒度锁。每个哈希值不同的对象都能获得自己独立的锁。在测试中,在被锁住的代码执行速度飞快的情况下,效率比分段锁慢 30% 左右。如果有长耗时操作,感觉表现应该会更好。代码如下:

public class HashLock<T> {private boolean isFair = false;private final SegmentLock<T> segmentLock = new SegmentLock<>();//分段锁private final ConcurrentHashMap<T, LockInfo> lockMap = new ConcurrentHashMap<>();public HashLock() {}public HashLock(boolean fair) {isFair = fair;}public void lock(T key) {LockInfo lockInfo;segmentLock.lock(key);try {lockInfo = lockMap.get(key);if (lockInfo == null) {lockInfo = new LockInfo(isFair);lockMap.put(key, lockInfo);} else {lockInfo.count.incrementAndGet();}} finally {segmentLock.unlock(key);}lockInfo.lock.lock();}public void unlock(T key) {LockInfo lockInfo = lockMap.get(key);if (lockInfo.count.get() == 1) {segmentLock.lock(key);try {if (lockInfo.count.get() == 1) {lockMap.remove(key);}} finally {segmentLock.unlock(key);}}lockInfo.count.decrementAndGet();lockInfo.unlock();}private static class LockInfo {public ReentrantLock lock;public AtomicInteger count = new AtomicInteger(1);private LockInfo(boolean fair) {this.lock = new ReentrantLock(fair);}public void lock() {this.lock.lock();}public void unlock() {this.lock.unlock();}}
}

 

    3. 弱引用锁

        哈希锁因为引入的分段锁来保证锁创建和销毁的同步,总感觉有点瑕疵,所以写了第三个锁来寻求更好的性能和更细粒度的锁。这个锁的思想是借助java的弱引用来创建锁,把锁的销毁交给jvm的垃圾回收,来避免额外的消耗。

        有点遗憾的是因为使用了ConcurrentHashMap作为锁的容器,所以没能真正意义上的摆脱分段锁。这个锁的性能比 HashLock 快10% 左右。锁代码:

/*** 弱引用锁,为每个独立的哈希值提供独立的锁功能*/
public class WeakHashLock<T> {private ConcurrentHashMap<T, WeakLockRef<T, ReentrantLock>> lockMap = new ConcurrentHashMap<>();private ReferenceQueue<ReentrantLock> queue = new ReferenceQueue<>();public ReentrantLock get(T key) {if (lockMap.size() > 1000) {clearEmptyRef();}WeakReference<ReentrantLock> lockRef = lockMap.get(key);ReentrantLock lock = (lockRef == null ? null : lockRef.get());while (lock == null) {lockMap.putIfAbsent(key, new WeakLockRef<>(new ReentrantLock(), queue, key));lockRef = lockMap.get(key);lock = (lockRef == null ? null : lockRef.get());if (lock != null) {return lock;}clearEmptyRef();}return lock;}@SuppressWarnings("unchecked")private void clearEmptyRef() {Reference<? extends ReentrantLock> ref;while ((ref = queue.poll()) != null) {WeakLockRef<T, ? extends ReentrantLock> weakLockRef = (WeakLockRef<T, ? extends ReentrantLock>) ref;lockMap.remove(weakLockRef.key);}}private static final class WeakLockRef<T, K> extends WeakReference<K> {final T key;private WeakLockRef(K referent, ReferenceQueue<? super K> q, T key) {super(referent, q);this.key = key;}}
}

 

后记

    最开始想借助 locksupport 和 AQS 来实现细粒度锁,写着写着发现正在实现的东西和java 原生的锁区别不大,于是放弃改为对java自带锁的封装,浪费了不少时间。

    实际上在实现了这些细粒度锁之后,又有了新的想法,比如可以通过分段思想将数据提交给专门的线程来处理,可以减少大量线程的阻塞时间,留待日后探索...

这篇关于细粒度锁的实现的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1146687

相关文章

golang版本升级如何实现

《golang版本升级如何实现》:本文主要介绍golang版本升级如何实现问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录golanwww.chinasem.cng版本升级linux上golang版本升级删除golang旧版本安装golang最新版本总结gola

SpringBoot中SM2公钥加密、私钥解密的实现示例详解

《SpringBoot中SM2公钥加密、私钥解密的实现示例详解》本文介绍了如何在SpringBoot项目中实现SM2公钥加密和私钥解密的功能,通过使用Hutool库和BouncyCastle依赖,简化... 目录一、前言1、加密信息(示例)2、加密结果(示例)二、实现代码1、yml文件配置2、创建SM2工具

Mysql实现范围分区表(新增、删除、重组、查看)

《Mysql实现范围分区表(新增、删除、重组、查看)》MySQL分区表的四种类型(范围、哈希、列表、键值),主要介绍了范围分区的创建、查询、添加、删除及重组织操作,具有一定的参考价值,感兴趣的可以了解... 目录一、mysql分区表分类二、范围分区(Range Partitioning1、新建分区表:2、分

MySQL 定时新增分区的实现示例

《MySQL定时新增分区的实现示例》本文主要介绍了通过存储过程和定时任务实现MySQL分区的自动创建,解决大数据量下手动维护的繁琐问题,具有一定的参考价值,感兴趣的可以了解一下... mysql创建好分区之后,有时候会需要自动创建分区。比如,一些表数据量非常大,有些数据是热点数据,按照日期分区MululbU

MySQL中查找重复值的实现

《MySQL中查找重复值的实现》查找重复值是一项常见需求,比如在数据清理、数据分析、数据质量检查等场景下,我们常常需要找出表中某列或多列的重复值,具有一定的参考价值,感兴趣的可以了解一下... 目录技术背景实现步骤方法一:使用GROUP BY和HAVING子句方法二:仅返回重复值方法三:返回完整记录方法四:

IDEA中新建/切换Git分支的实现步骤

《IDEA中新建/切换Git分支的实现步骤》本文主要介绍了IDEA中新建/切换Git分支的实现步骤,通过菜单创建新分支并选择是否切换,创建后在Git详情或右键Checkout中切换分支,感兴趣的可以了... 前提:项目已被Git托管1、点击上方栏Git->NewBrancjsh...2、输入新的分支的

Python实现对阿里云OSS对象存储的操作详解

《Python实现对阿里云OSS对象存储的操作详解》这篇文章主要为大家详细介绍了Python实现对阿里云OSS对象存储的操作相关知识,包括连接,上传,下载,列举等功能,感兴趣的小伙伴可以了解下... 目录一、直接使用代码二、详细使用1. 环境准备2. 初始化配置3. bucket配置创建4. 文件上传到os

关于集合与数组转换实现方法

《关于集合与数组转换实现方法》:本文主要介绍关于集合与数组转换实现方法,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1、Arrays.asList()1.1、方法作用1.2、内部实现1.3、修改元素的影响1.4、注意事项2、list.toArray()2.1、方

使用Python实现可恢复式多线程下载器

《使用Python实现可恢复式多线程下载器》在数字时代,大文件下载已成为日常操作,本文将手把手教你用Python打造专业级下载器,实现断点续传,多线程加速,速度限制等功能,感兴趣的小伙伴可以了解下... 目录一、智能续传:从崩溃边缘抢救进度二、多线程加速:榨干网络带宽三、速度控制:做网络的好邻居四、终端交互

java实现docker镜像上传到harbor仓库的方式

《java实现docker镜像上传到harbor仓库的方式》:本文主要介绍java实现docker镜像上传到harbor仓库的方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地... 目录1. 前 言2. 编写工具类2.1 引入依赖包2.2 使用当前服务器的docker环境推送镜像2.2