2019独角兽企业重金招聘Python工程师标准>>>

最近做的一个小项目中有这样的需求:整个项目有一份config.json保存着项目的一些配置,是存储在本地文件的一个资源,并且应用中存在读写(读>>写)更新问题。既然读写并发操作,那么就涉及到操作互斥,这里自然想到了读写锁,本文对读写锁方面的知识做个梳理。

为什么需要读写锁?

与传统锁不同的是读写锁的规则是可以共享读,但只能一个写,总结起来为:读读不互斥,读写互斥,写写互斥,而一般的独占锁是:读读互斥,读写互斥,写写互斥,而场景中往往读远远大于写,读写锁就是为了这种优化而创建出来的一种机制。

注意是读远远大于写,一般情况下独占锁的效率低来源于高并发下对临界区的激烈竞争导致线程上下文切换。因此当并发不是很高的情况下,读写锁由于需要额外维护读锁的状态,可能还不如独占锁的效率高。因此需要根据实际情况选择使用。

一个简单的读写锁实现

根据上面理论可以利用两个int变量来简单实现一个读写锁,实现虽然烂,但是原理都是差不多的,值得阅读下。

public class ReadWriteLock {/*** 读锁持有个数*/private int readCount = 0;/*** 写锁持有个数*/private int writeCount = 0;/*** 获取读锁,读锁在写锁不存在的时候才能获取*/public synchronized void lockRead() throws InterruptedException {// 写锁存在,需要waitwhile (writeCount > 0) {wait();}readCount++;}/*** 释放读锁*/public synchronized void unlockRead() {readCount--;notifyAll();}/*** 获取写锁,当读锁存在时需要wait.*/public synchronized void lockWrite() throws InterruptedException {// 先判断是否有写请求while (writeCount > 0) {wait();}// 此时已经不存在获取写锁的线程了,因此占坑,防止写锁饥饿writeCount++;// 读锁为0时获取写锁while (readCount > 0) {wait();}}/*** 释放读锁*/public synchronized void unlockWrite() {writeCount--;notifyAll();}}

ReadWriteLock的实现原理

在Java中ReadWriteLock的主要实现为ReentrantReadWriteLock,其提供了以下特性:

  1. 公平性选择:支持公平与非公平(默认)的锁获取方式,吞吐量非公平优先于公平。
  2. 可重入:读线程获取读锁之后可以再次获取读锁,写线程获取写锁之后可以再次获取写锁
  3. 可降级:写线程获取写锁之后,其还可以再次获取读锁,然后释放掉写锁,那么此时该线程是读锁状态,也就是降级操作。

ReentrantReadWriteLock的结构

ReentrantReadWriteLock的核心是由一个基于AQS的同步器Sync构成,然后由其扩展出ReadLock(共享锁),WriteLock(排它锁)所组成。

并且从ReentrantReadWriteLock的构造函数中可以发现ReadLockWriteLock使用的是同一个Sync,具体怎么实现同一个队列既可以为共享锁,又可以表示排他锁下文会具体分析。

清单一:ReentrantReadWriteLock构造函数

public ReentrantReadWriteLock(boolean fair) {sync = fair ? new FairSync() : new NonfairSync();readerLock = new ReadLock(this);writerLock = new WriteLock(this);}

Sync的实现

sync是读写锁实现的核心,sync是基于AQS实现的,在AQS中核心是state字段和双端队列,那么一个一个问题来分析。

Sync如何同时表示读锁与写锁?

清单2:读写锁状态获取

static final int SHARED_SHIFT = 16;
static final int SHARED_UNIT = (1 << SHARED_SHIFT);
static final int MAX_COUNT = (1 << SHARED_SHIFT) - 1;
static final int EXCLUSIVE_MASK = (1 << SHARED_SHIFT) - 1;/** Returns the number of shared holds represented in count */
static int sharedCount(int c) { return c >>> SHARED_SHIFT; }
/** Returns the number of exclusive holds represented in count */
static int exclusiveCount(int c) { return c & EXCLUSIVE_MASK; }

从代码中获取读写状态可以看出其是把state(int32位)字段分成高16位与低16位,其中高16位表示读锁个数,低16位表示写锁个数,如下图所示(图来自Java并发编程艺术)。


该图表示当前一个线程获取到了写锁,并且重入了两次,因此低16位是3,并且该线程又获取了读锁,并且重入了一次,所以高16位是2,当写锁被获取时如果读锁不为0那么读锁一定是获取写锁的这个线程。

读锁的获取

读锁的获取主要实现是AQS中的acquireShared方法,其调用过程如下代码。

清单3:读锁获取入口

// ReadLock
public void lock() {sync.acquireShared(1);
}
// AQS
public final void acquireShared(int arg) {if (tryAcquireShared(arg) < 0)doAcquireShared(arg);
}

其中doAcquireShared(arg)方法是获取失败之后AQS中入队操作,等待被唤醒后重新获取,那么关键点就是tryAcquireShared(arg)方法,方法有点长,因此先总结出获取读锁所经历的步骤,获取的第一部分步骤如下:

  • 操作1:读写需要互斥,因此当存在写锁并且持有写锁的线程不是该线程时获取失败。
  • 操作2:是否存在等待写锁的线程,存在的话则获取读锁需要等待,避免写锁饥饿。(写锁优先级是比较高的)
  • 操作3:CAS获取读锁,实际上是state字段的高16位自增。
  • 操作4:获取成功后再ThreadLocal中记录当前线程获取读锁的次数。

清单4:读锁获取的第一部分

protected final int tryAcquireShared(int unused) {Thread current = Thread.currentThread();int c = getState();// 操作1:存在写锁,并且写锁不是当前线程则直接去排队if (exclusiveCount(c) != 0 &&getExclusiveOwnerThread() != current)return -1;int r = sharedCount(c);// 操作2:读锁是否该阻塞,对于非公平模式下写锁获取优先级会高,如果存在要获取写锁的线程则读锁需要让步,公平模式下则先来先到if (!readerShouldBlock() && // 读锁使用高16位,因此存在获取上限为2^16-1r < MAX_COUNT &&// 操作3:CAS修改读锁状态,实际上是读锁状态+1compareAndSetState(c, c + SHARED_UNIT)) {// 操作4:执行到这里说明读锁已经获取成功,因此需要记录线程状态。if (r == 0) {firstReader = current; // firstReader是把读锁状态从0变成1的那个线程firstReaderHoldCount = 1;} else if (firstReader == current) { firstReaderHoldCount++;} else {// 这些代码实际上是从ThreadLocal中获取当前线程重入读锁的次数,然后自增下。HoldCounter rh = cachedHoldCounter; // cachedHoldCounter是上一个获取锁成功的线程if (rh == null || rh.tid != getThreadId(current))cachedHoldCounter = rh = readHolds.get();else if (rh.count == 0)readHolds.set(rh);rh.count++;}return 1;}// 当操作2,操作3失败时执行该逻辑return fullTryAcquireShared(current);}

当操作2,操作3失败时会执行fullTryAcquireShared(current),为什么会这样写呢?个人认为是一种补偿操作,操作2与操作3失败并不代表当前线程没有读锁的资格,并且这里的读锁是共享锁,有资格就应该被获取成功,因此给予补偿获取读锁的操作。在fullTryAcquireShared(current)中是一个循环获取读锁的过程,大致步骤如下:

  • 操作5:等同于操作2,存在写锁,且写锁线程并非当前线程则直接返回失败
  • 操作6:当前线程是重入读锁,这里只会偏向第一个获取读锁的线程以及最后一个获取读锁的线程,其他都需要去AQS中排队。
  • 操作7:CAS改变读锁状态
  • 操作8:同操作4,获取成功后再ThreadLocal中记录当前线程获取读锁的次数。

清单5:读锁获取的第二部分

final int fullTryAcquireShared(Thread current) {HoldCounter rh = null;// 最外层嵌套循环for (;;) {int c = getState();// 操作5:存在写锁,且写锁并非当前线程则直接返回失败if (exclusiveCount(c) != 0) {if (getExclusiveOwnerThread() != current)return -1;// else we hold the exclusive lock; blocking here// would cause deadlock.// 操作6:如果当前线程是重入读锁则放行} else if (readerShouldBlock()) {// Make sure we're not acquiring read lock reentrantly// 当前是firstReader,则直接放行,说明是已获取的线程重入读锁if (firstReader == current) {// assert firstReaderHoldCount > 0;} else {// 执行到这里说明是其他线程,如果是cachedHoldCounter(其count不为0)也就是上一个获取锁的线程则可以重入,否则进入AQS中排队// **这里也是对写锁的让步**,如果队列中头结点为写锁,那么当前获取读锁的线程要进入队列中排队if (rh == null) {rh = cachedHoldCounter;if (rh == null || rh.tid != getThreadId(current)) {rh = readHolds.get();if (rh.count == 0)readHolds.remove();}}// 说明是上述刚初始化的rh,所以直接去AQS中排队if (rh.count == 0)return -1;}}if (sharedCount(c) == MAX_COUNT)throw new Error("Maximum lock count exceeded");// 操作7:修改读锁状态,实际上读锁自增操作if (compareAndSetState(c, c + SHARED_UNIT)) {// 操作8:对ThreadLocal中维护的获取锁次数进行更新。if (sharedCount(c) == 0) {firstReader = current;firstReaderHoldCount = 1;} else if (firstReader == current) {firstReaderHoldCount++;} else {if (rh == null)rh = cachedHoldCounter;if (rh == null || rh.tid != getThreadId(current))rh = readHolds.get();else if (rh.count == 0)readHolds.set(rh);rh.count++;cachedHoldCounter = rh; // cache for release}return 1;}}}

读锁的释放

清单6:读锁释放入口

// ReadLock
public void unlock() {sync.releaseShared(1);
}
// Sync
public final boolean releaseShared(int arg) {if (tryReleaseShared(arg)) {doReleaseShared(); // 这里实际上是释放读锁后唤醒写锁的线程操作return true;}return false;
}

读锁的释放主要是tryReleaseShared(arg)函数,因此拆解其步骤如下:

  • 操作1:清理ThreadLocal中保存的获取锁数量信息
  • 操作2:CAS修改读锁个数,实际上是自减一

清单7:读锁的释放流程

protected final boolean tryReleaseShared(int unused) {Thread current = Thread.currentThread();// 操作1:清理ThreadLocal对应的信息if (firstReader == current) {;if (firstReaderHoldCount == 1)firstReader = null;elsefirstReaderHoldCount--;} else {HoldCounter rh = cachedHoldCounter;if (rh == null || rh.tid != getThreadId(current))rh = readHolds.get();int count = rh.count;// 已释放完的读锁的线程清空操作if (count <= 1) {readHolds.remove();// 如果没有获取锁却释放则会报该错误if (count <= 0)throw unmatchedUnlockException();}--rh.count;}// 操作2:循环中利用CAS修改读锁状态for (;;) {int c = getState();int nextc = c - SHARED_UNIT;if (compareAndSetState(c, nextc))// Releasing the read lock has no effect on readers,// but it may allow waiting writers to proceed if// both read and write locks are now free.return nextc == 0;}}

写锁的获取

清单8:写锁的获取入口

// WriteLockpublic void lock() {sync.acquire(1);}
// AQSpublic final void acquire(int arg) {// 尝试获取,获取失败后入队,入队失败则interrupt当前线程if (!tryAcquire(arg) &&acquireQueued(addWaiter(Node.EXCLUSIVE), arg))selfInterrupt();}

写锁的获取也主要是tryAcquire(arg)方法,这里也拆解步骤:

  • 操作1:如果读锁数量不为0或者写锁数量不为0,并且不是重入操作,则获取失败。
  • 操作2:如果当前锁的数量为0,也就是不存在操作1的情况,那么该线程是有资格获取到写锁,因此修改状态,设置独占线程为当前线程

清单9:写锁的获取

protected final boolean tryAcquire(int acquires) {Thread current = Thread.currentThread();int c = getState();int w = exclusiveCount(c);// 操作1:c != 0,说明存在读锁或者写锁if (c != 0) {// (Note: if c != 0 and w == 0 then shared count != 0)  // 写锁为0,读锁不为0 或者获取写锁的线程并不是当前线程,直接失败if (w == 0 || current != getExclusiveOwnerThread())return false;if (w + exclusiveCount(acquires) > MAX_COUNT)throw new Error("Maximum lock count exceeded");// Reentrant acquire// 执行到这里说明是写锁线程的重入操作,直接修改状态,也不需要CAS因为没有竞争setState(c + acquires);return true;}// 操作2:获取写锁,writerShouldBlock对于非公平模式直接返回fasle,对于公平模式则线程需要排队,因此需要阻塞。if (writerShouldBlock() ||!compareAndSetState(c, c + acquires))return false;setExclusiveOwnerThread(current);return true;
}

写锁的释放

清单10:写锁的释放入口

// WriteLock
public void unlock() {sync.release(1);}
// AQS
public final boolean release(int arg) {// 释放锁成功后唤醒队列中第一个线程if (tryRelease(arg)) {Node h = head;if (h != null && h.waitStatus != 0)unparkSuccessor(h);return true;}return false;
}

写锁的释放主要是tryRelease(arg)方法,其逻辑就比较简单了,注释很详细。

清单11:写锁的释放

protected final boolean tryRelease(int releases) {// 如果当前线程没有获取写锁却释放,则直接抛异常if (!isHeldExclusively())throw new IllegalMonitorStateException();// 状态变更至nextcint nextc = getState() - releases;// 因为写锁是可以重入,所以在都释放完毕后要把独占标识清空boolean free = exclusiveCount(nextc) == 0;if (free)setExclusiveOwnerThread(null);// 修改状态setState(nextc);return free;}

一些其他问题

锁降级操作哪里体现?

锁降级操作指的是一个线程获取写锁之后再获取读锁,然后读锁释放掉写锁的过程。在tryAcquireShared(arg)获取读锁的代码中有如下代码。
清单12:写锁降级策略

Thread current = Thread.currentThread();// 当前状态int c = getState();// 存在写锁,并且写锁不等于当前线程时返回,换句话说等写锁为当前线程时则可以继续往下获取读锁。if (exclusiveCount(c) != 0 &&getExclusiveOwnerThread() != current)return -1;
。。。。。读锁获取。。。。。

那么锁降级有什么用?答案是为了可见性的保证。在ReentrantReadWriteLock的javadoc中有如下代码,其是锁降级的一个应用示例。

class CachedData {Object data;volatile boolean cacheValid;final ReentrantReadWriteLock rwl = new ReentrantReadWriteLock();void processCachedData() {// 获取读锁rwl.readLock().lock();if (!cacheValid) {// Must release read lock before acquiring write lock,不释放的话下面写锁会获取不成功,造成死锁rwl.readLock().unlock();// 获取写锁rwl.writeLock().lock();try {// Recheck state because another thread might have// acquired write lock and changed state before we did.if (!cacheValid) {data = ...cacheValid = true;}// Downgrade by acquiring read lock before releasing write lock// 这里再次获取读锁,如果不获取那么当写锁释放后可能其他写线程再次获得写锁,导致下方`use(data)`时出现不一致的现象// 这个操作就是降级rwl.readLock().lock();} finally {rwl.writeLock().unlock(); // Unlock write, still hold read}}try {// 使用完后释放读锁use(data);} finally {rwl.readLock().unlock();}}}}

公平与非公平的区别

清单13:公平下的Sync

static final class FairSync extends Sync {private static final long serialVersionUID = -2274990926593161451L;final boolean writerShouldBlock() {return hasQueuedPredecessors(); // 队列中是否有元素,有责当前操作需要block}final boolean readerShouldBlock() {return hasQueuedPredecessors();// 队列中是否有元素,有责当前操作需要block}}

公平下的Sync实现策略是所有获取的读锁或者写锁的线程都需要入队排队,按照顺序依次去尝试获取锁。

清单14:非公平下的Sync

static final class NonfairSync extends Sync {private static final long serialVersionUID = -8159625535654395037L;final boolean writerShouldBlock() {// 非公平下不考虑排队,因此写锁可以竞争获取return false; // writers can always barge}final boolean readerShouldBlock() {/* As a heuristic to avoid indefinite writer starvation,* block if the thread that momentarily appears to be head* of queue, if one exists, is a waiting writer.  This is* only a probabilistic effect since a new reader will not* block if there is a waiting writer behind other enabled* readers that have not yet drained from the queue.*/// 这里实际上是一个优先级,如果队列中头部元素时写锁,那么读锁需要等待,避免写锁饥饿。return apparentlyFirstQueuedIsExclusive();}}

非公平下由于抢占式获取锁,写锁是可能产生饥饿,因此解决办法就是提高写锁的优先级,换句话说获取写锁之前先占坑。

作者:牛李,一个正在努力学习的码农,主要关注后端领域、代码设计,以及一些有趣的技术。GitHub: https://github.com/mrdear

本文系作者投稿文章。欢迎投稿。

投稿内容要求

  • 互联网技术相关,包括但不限于开发语言、网络、数据库、架构、运维、前端、DevOps(DevXXX)、AI、区块链、存储、移动、安全、技术团队管理等内容。
  • 文章不需要首发,可以是已经在开源中国博客或网上其它平台发布过的。但是鼓励首发,首发内容被收录可能性较大。
  • 如果你是记录某一次解决了某一个问题(这在博客中占绝大比例),那么需要将问题的前因后果描述清楚,最直接的就是结合图文等方式将问题复现,同时完整地说明解决思路与最终成功的方案。
  • 如果你是分析某一技术理论知识,请从定义、应用场景、实际案例、关键技术细节、观点等方面,对其进行较为全面地介绍。
  • 如果你是以实际案例分享自己或者公司对诸如某一架构模型、通用技术、编程语言、运维工具的实践,那么请将事件相关背景、具体技术细节、演进过程、思考、应用效果等方面描述清楚
  • 其它未尽 case 具体情况具体分析,不虚的,文章投过来试试先,比如我们并不拒绝就某个热点事件对其进行的报导、深入解析。

投稿方式

  • 以 Word 或者 Markdown 文档的形式将稿件投递到 oscbianji@oschina.cn 邮箱

重要说明

  • 作者需要拥有所投文章的所有权,不能将别人的文章拿过来投递。
  • 投递的文章需要经过审核,如果开源中国编辑觉得需要的话,将与作者一起进一步完善文章,意在使文章更佳、传播更广。
  • 文章版权归作者所有,开源中国获得文章的传播权,可在开源中国各个平台进行文章传播,同时保留文章原始出处和作者信息,可在官方博客中标原创标签。

转载于:https://my.oschina.net/editorial-story/blog/1928306

Java 读写锁实现原理相关推荐

  1. Java多线程读写锁ReentrantReadWriteLock原理详解

    ReentrantLock属于排他锁,这些锁在同一时刻只允许一个线程进行访问,而读写锁在同一时刻可以允许多个线程访问,但是在写线程访问时,所有的读和其他写线程都被阻塞.读写锁维护了一对锁,一个读锁和一 ...

  2. java车次信息_从火车站车次公示栏来学Java读写锁

    Java多线程并发之读写锁 本文主要内容:读写锁的理论:通过生活中例子来理解读写锁:读写锁的代码演示:读写锁总结.通过理论(总结)-例子-代码-然后再次总结,这四个步骤来让大家对读写锁的深刻理解. 本 ...

  3. java读写锁死锁例子_Java并发关于重入锁与读写锁的详解

    这篇文章主要介绍了Java并发编程之重入锁与读写锁,文中相关实例代码详细,测试可用,具有一定参考价值,需要的朋友可以了解下. 重入锁 重入锁,顾名思义,就是支持重进入的锁,它表示该锁能够支持一个线程对 ...

  4. java写车次查询_从火车站车次公示栏来学Java读写锁

    Java多线程并发之读写锁 本文主要内容:读写锁的理论:通过生活中例子来理解读写锁:读写锁的代码演示:读写锁总结.通过理论(总结)-例子-代码-然后再次总结,这四个步骤来让大家对读写锁的深刻理解. 本 ...

  5. 图文深入解析 JAVA 读写锁,为什么读锁套写锁会死锁,反过来却不会?

    一.回顾基本的读写锁 我们知道读写锁 #java.util.concurrent.locks.ReentrantReadWriteLock 是一个 "读写互斥,写写互斥,读读共享" ...

  6. java 读写锁_Java中的读写锁

    一.读写锁 1.初识读写锁 a)Java中的锁--Lock和synchronized中介绍的ReentrantLock和synchronized基本上都是排它锁,意味着这些锁在同一时刻只允许一个线程进 ...

  7. java读写锁降级_java的读写锁中锁降级的问题

    读写锁是什么我就不多说了,下面说什么是锁降级 锁降级: 锁降级指的是写锁降级成为读锁.如果当前线程拥有写锁,然后将其释放,最后再获取读锁,这种分段完成的过程不能称之为锁降级.锁降级是指把持住(当前拥有 ...

  8. JAVA 读写锁中锁降级的必要性

    既然大家看到了这篇博客,也应该都大概了解了读写锁的一些概念,咱们直接上主题,读写锁中为什么要用锁降级: 先引用书上的一段话说说锁降级的概念:         锁降级指的是写锁降级成为读锁.如果当前线程 ...

  9. 做了5年Java,java读写锁使用

    阿里巴巴Java岗面试题分享 1.HashMap 的内部结构?内部原理?和 HashTable 的区别,假如发⽣了 hash 碰撞,如何设计能让遍历效率⾼? 2.讲一讲讲讲 ConcurrentHas ...

最新文章

  1. cli3解决 ie11语法错误 vue_vue-admin-template基于vue2的极简后台管理系统
  2. 汇编语言——《分支与循环程序设计》实验报告
  3. 两种方法动态获得ABAP类的class attribute的值
  4. Nginx 源码编译
  5. 一个在线让你的网站多语言化的工具
  6. 微软复合文档二进制格式实例分析
  7. 【Sql查询数据】for 日、月、年
  8. 央视频卫视app直播收看教程(2021)
  9. 小牛各个版本的限速破解方式-适用N1/M1/N1s----附加转向灯提示音修改
  10. 戴尔linux恢复镜像,戴尔 SupportAssist OS Recovery 系统恢复教程
  11. 熊逸《唐诗50讲》感时篇 - 学习笔记与感想
  12. 数商云:传统建筑行业产业转型,轻松实现建筑材料信息系统撮合交易智能化、数字化管理
  13. windows用户验证
  14. 百度开晕,中国免费电商模式成定局
  15. 我的第200篇博客:Linux下手把手搭建DHCP、DNS、HTTP、FTP服务器及遇到问题的解决过程
  16. 根据屏幕大小动态设置字体rem
  17. OCO-2卫星数据批量化下载教程
  18. opencv修改图片大小
  19. Excel-VBA 股票网格交易策略回测
  20. linux随机输出加减乘除_实现加减乘除计算器

热门文章

  1. [转]机器学习和深度学习资料汇总【01】
  2. selenium + python 登录页面,输入账号、密码,元素定位问题
  3. Service的线程、工作线程、权限及系统Service
  4. JZOJ 3.10 1540——岛屿
  5. Linux上使用shell脚本查看内存情况(超实用)
  6. javascript 模式学习篇---基础
  7. Windows Phone中使用Local DataBase与ISolateStorage—在MVVM模式下(—)
  8. 【Android APT】注解处理器 ( Element 注解节点相关操作 )
  9. 【Java 并发编程】CountDownLatch 使用场景示例
  10. nmon服务器监控工具的使用安装