Watch 机制支持 Watch 某个固定的 key,也支持 Watch 一个范围(前缀机制)。

当被 Watch 的 key 或范围发生变化,客户端将收到通知;在实现分布式锁时,如果抢锁失败, 可通过 Prefix 机制返回的 Key-Value 列表获得 Revision 比自己小且相差最小的 key(称为 pre-key), 对 pre-key 进行监听,因为只有它释放锁,自己才能获得锁,如果 Watch 到 pre-key 的 DELETE 事件, 则说明 pre-key 已经释放,自己将持有锁。

etcd分布式锁原理图

etcd分布式锁的实现流程

  1. 建立连接

客户端连接 etcd,以 /etcd/lock 为前缀创建全局唯一的 key, 假设第一个客户端对应的 key="/etcd/lock/UUID1",第二个为 key="/etcd/lock/UUID2"; 客户端分别为自己的 key 创建租约 - Lease,租约的长度根据业务耗时确定;

  1. 创建定时任务作为租约的“心跳”

当一个客户端持有锁期间,其它客户端只能等待,为了避免等待期间租约失效, 客户端需创建一个定时任务作为“心跳”进行续约。此外,如果持有锁期间客户端崩溃, 心跳停止,key 将因租约到期而被删除,从而锁释放,避免死锁;

  1. 客户端将自己全局唯一的 key 写入 etcd

执行 put 操作,将步骤 1 中创建的 key 绑定租约写入 Etcd,根据 Etcd 的 Revision 机制, 假设两个客户端 put 操作返回的 Revision 分别为 1、2,客户端需记录 Revision 用以 接下来判断自己是否获得锁;

  1. 客户端判断是否获得锁

客户端以前缀 /etcd/lock/ 读取 key-Value 列表,判断自己 key 的 Revision 是否为当前列表中 最小的,如果是则认为获得锁;否则监听列表中前一个 Revision 比自己小的 key 的删除事件,一旦监听到删除事件或者因租约失效而删除的事件,则自己获得锁;

  1. 执行业务

获得锁后,操作共享资源,执行业务代码

  1. 释放锁

完成业务流程后,删除对应的key释放锁

肝代码

有了以上理论做基础,我们开始etcd分布式锁的代码实现。

jetcd客户端

jetcd是etcd的Java客户端,它提供了丰富的接口来操作etcd,使用方便。

redis数据准备

初始化库存stock=300,再设置一个lucky=0,表示抢到库存的人,实际场景中可以是用户订单信息,每扣减一个库存,lucky便加1。

etcd分布式锁的实现

由于etcd的Lock接口有一套自己的实现,zookeeper的Lock接口也有自己的一套实现,redis…各种分布式锁实现方案都有自己的Lock,因此,我封装了一个模板方法:

/*** @program: distributed-lock* @description: 各种分布式锁的基类,模板方法* @author: 行百里者* @create: 2020/10/14 12:29**/
public class AbstractLock implements Lock {@Overridepublic void lock() {throw new RuntimeException("请自行实现该方法");}@Overridepublic void lockInterruptibly() throws InterruptedException {throw new RuntimeException("请自行实现该方法");}@Overridepublic boolean tryLock() {throw new RuntimeException("请自行实现该方法");}@Overridepublic boolean tryLock(long time, TimeUnit unit) throws InterruptedException {throw new RuntimeException("请自行实现该方法");}@Overridepublic void unlock() {throw new RuntimeException("请自行实现该方法");}@Overridepublic Condition newCondition() {throw new RuntimeException("请自行实现该方法");}
}

有了这个模板方法之后,后续分布式锁的实现均可以继承这个模板方法类。

etcd分布式锁的实现

@Data
public class EtcdDistributedLock extends AbstractLock {private final static Logger LOGGER = LoggerFactory.getLogger(EtcdDistributedLock.class);private Client client;private Lock lockClient;private Lease leaseClient;private String lockKey;//锁路径,方便记录日志private String lockPath;//锁的次数private AtomicInteger lockCount;//租约有效期。作用 1:客户端崩溃,租约到期后自动释放锁,防止死锁 2:正常执行自动进行续租private Long leaseTTL;//续约锁租期的定时任务,初次启动延迟,默认为1s,根据实际业务需要设置private Long initialDelay = 0L;//定时任务线程池ScheduledExecutorService scheduledExecutorService;//线程与锁对象的映射private final ConcurrentMap<Thread, LockData> threadData = Maps.newConcurrentMap();public EtcdDistributedLock(Client client, String lockKey, Long leaseTTL, TimeUnit unit) {this.client = client;this.lockClient = client.getLockClient();this.leaseClient = client.getLeaseClient();this.lockKey = lockKey;this.leaseTTL = unit.toNanos(leaseTTL);scheduledExecutorService = Executors.newSingleThreadScheduledExecutor();}@Overridepublic void lock() {}@Overridepublic void unlock() {}
}

其中lock方法的实现:

@Override
public void lock() {Thread currentThread = Thread.currentThread();LockData existsLockData = threadData.get(currentThread);//System.out.println(currentThread.getName() + " 加锁 existsLockData:" + existsLockData);//锁重入if (existsLockData != null && existsLockData.isLockSuccess()) {int lockCount = existsLockData.lockCount.incrementAndGet();if (lockCount < 0) {throw new Error("超出etcd锁可重入次数限制");}return;}//创建租约,记录租约idlong leaseId;try {leaseId = leaseClient.grant(TimeUnit.NANOSECONDS.toSeconds(leaseTTL)).get().getID();//续租心跳周期long period = leaseTTL - leaseTTL / 5;//启动定时续约scheduledExecutorService.scheduleAtFixedRate(new KeepAliveTask(leaseClient, leaseId),initialDelay,period,TimeUnit.NANOSECONDS);//加锁LockResponse lockResponse = lockClient.lock(ByteSequence.from(lockKey.getBytes()), leaseId).get();if (lockResponse != null) {lockPath = lockResponse.getKey().toString(StandardCharsets.UTF_8);LOGGER.info("线程:{} 加锁成功,锁路径:{}", currentThread.getName(), lockPath);}//加锁成功,设置锁对象LockData lockData = new LockData(lockKey, currentThread);lockData.setLeaseId(leaseId);lockData.setService(scheduledExecutorService);threadData.put(currentThread, lockData);lockData.setLockSuccess(true);} catch (InterruptedException | ExecutionException e) {e.printStackTrace();}
}

简而言之,加锁的代码就是按照如下步骤来的:

  1. 检查锁重入性
  2. 设置租约
  3. 开启定时任务心跳检查
  4. 阻塞获取锁
  5. 加锁成功,设置锁对象

业务处理完成(扣减库存)后,解锁:

@Override
public void unlock() {Thread currentThread = Thread.currentThread();//System.out.println(currentThread.getName() + " 释放锁..");LockData lockData = threadData.get(currentThread);//System.out.println(currentThread.getName() + " lockData " + lockData);if (lockData == null) {throw new IllegalMonitorStateException("线程:" + currentThread.getName() + " 没有获得锁,lockKey:" + lockKey);}int lockCount = lockData.lockCount.decrementAndGet();if (lockCount > 0) {return;}if (lockCount < 0) {throw new IllegalMonitorStateException("线程:" + currentThread.getName() + " 锁次数为负数,lockKey:" + lockKey);}try {//正常释放锁if (lockPath != null) {lockClient.unlock(ByteSequence.from(lockPath.getBytes())).get();}//关闭续约的定时任务lockData.getService().shutdown();//删除租约if (lockData.getLeaseId() != 0L) {leaseClient.revoke(lockData.getLeaseId());}} catch (InterruptedException | ExecutionException e) {//e.printStackTrace();### 最后> **笔者已经把面试题和答案整理成了面试专题文档,有想获取到借鉴参考的朋友:点赞关注后,[戳这里即可免费领取](https://gitee.com/vip204888/java-p7)**![image](https://img-blog.csdnimg.cn/img_convert/24665a3f512164a3f895b0e4f4726b90.png)![image](https://img-blog.csdnimg.cn/img_convert/d17764a544b93f81a76f27a12d7b603d.png)![image](https://img-blog.csdnimg.cn/img_convert/047f1898e0b3432ffaabe55912dda465.png)![image](https://img-blog.csdnimg.cn/img_convert/90e4b9e81ed9f702356d96a16d1e575b.png)![image](https://img-blog.csdnimg.cn/img_convert/9774a4f7ca0f235e3ac51c5afdfa2452.png)m/vip204888/java-p7)**[外链图片转存中...(img-teUTlbj0-1628283604838)][外链图片转存中...(img-RgoMQYlT-1628283604839)][外链图片转存中...(img-dJ6Doyu2-1628283604840)][外链图片转存中...(img-LSmidihU-1628283604841)][外链图片转存中...(img-opo6nR2o-1628283604842)]![image](https://img-blog.csdnimg.cn/img_convert/8a02592cd22916e3e750d045a5ee6d00.png)

Java开发高级工程师面试,etcd:一款比Redis更骚的分布式锁的实现方式相关推荐

  1. 用etcd实现比Redis更安全的分布式锁

    随着 K8s 成为容器编排领域霸主,etcd 也越来越火,GitHub star 已超过 34.2K.当然这与它的应用场景广泛密不可分,从服务发现到分布式锁,从配置存储到分布式协调,可以说,etcd ...

  2. Java开发工程师面试经验总集

    置顶个交流群 文章觉得海星的话,可以来群里找桃子交流技术或者普通乱聊= = 挂群:820080257 文档链接:[腾讯文档]Java开发工程师 https://docs.qq.com/doc/DQlZ ...

  3. 2021年4月22日 阿里供应链Java开发实习面试(三面)(含总结)

    title: 2021年4月22日 阿里供应链Java开发实习面试(三面) tags: 面经 2021年4月22日 阿里供应链Java开发实习面试(三面) 上来就手撕一道代码--输入一个数,然后顺时针 ...

  4. 2021年3月16日 北京快手Java开发实习面试(海外增长方向)

    title: 2021年3月16日 北京快手Java开发实习面试(海外增长方向) tags: 面经 2021年3月16日 北京快手Java开发实习面试(海外增长方向) 自我介绍你能讲一下你的项目吗?你 ...

  5. 2021年3月12日 北京格灵深瞳Java开发实习面试(一面)

    title: 2021年3月12日 北京格灵深瞳Java开发实习面试 tags: 面经 2021年3月12日 北京格灵深瞳Java开发实习面试(一面) 首先上来问你问什么不做算法,转做开发呢?(因为我 ...

  6. Java开发大厂面试资料,让你的面试不再困难!

    你是否有过因为面试紧张而导致应聘失败的经历?你是否还在因为面试而感到头疼? Java开发大厂面试资料,让你的面试不再困难! Java能力和面试能力,这是两个方面的技能,可以这样说,如果不准备,一些大神 ...

  7. [ Java面试题 ]Java 开发岗面试知识点解析

    在不断的面试中,分类总结了 Java 开发岗位面试中的一些知识点. 主要包括以下几个部分: Java 基础知识点 Java 常见集合 高并发编程(JUC 包) JVM 内存管理 Java 8 知识点 ...

  8. 2020春招 / 2021秋招阿里、腾讯、字节、快手、美团 JAVA 开发岗面试高频问题总结

    2020春招 / 2021秋招阿里.腾讯.字节.快手.美团 JAVA 开发岗面试高频问题总结 2.1 进程和线程的区别? 2.2 进程的调度算法有哪些?(主要) 2.3 常用 IO 模型? 2.4 s ...

  9. 网易Java开发岗面试分享

    应对互联网技术面试绝不仅仅是刷题就可以达到的.首先选择技术岗位,其次每个岗位开始都是先着手面经,多看到了解,提炼出必考的技术点合集,最后针对这些必考技术,系统学习,融会贯通. 对这个岗位的必备技能,一 ...

最新文章

  1. JVM---堆(逃逸分析与代码优化)
  2. 通过Samba实现Win/Mac访问Linux
  3. loadrunner 录制 odbc 迭代出现lrd_db_option: ERROR, return-code=LRDE2009错误
  4. 计算机解决科学研究,近期查处科研不端行为典型案例及处理决定
  5. camunda流程引擎如此简单(二)
  6. VC维与DNN的Boundary
  7. ETL工具kettle的组件--生成记录
  8. 向net core 3.0进击——Swagger的改变
  9. MVC架构 -- 初学试水选课管理系统
  10. window连接树莓派linux桌面,远程连接Raspberry Pi(树莓派)图形用户界面(X Window)
  11. java界面化二叉排序树_105-线索化二叉树代码实现2
  12. vscode 新版eslint自动修复_程序员请收好:10 个实用的 VS Code 插件
  13. 总结_____大二上
  14. @RestController与@RequestMapping
  15. 【SVM分类】基于改进鲸鱼算法优化最小二乘支持向量机实现数据分类matlab代码
  16. 关于「微软拼音」自定义文本这件事
  17. Machine learning system design - Error analysis
  18. 压电雨量传感器不堵不粘维护简单的设计结构
  19. 分享 |转录组测序那些事儿
  20. windows xp 驱动开发(十八) USB驱动程序开发用到的工具总结

热门文章

  1. DataFrame基础知识
  2. C#控制Excel的打印格式
  3. 插件Translation配置完有道应用ID和应用密钥后依然报无相关服务的实例
  4. 数字信号处理 --- 周期信号的三角函数表示 一(三角函数的性质和三角波的合成)
  5. MFC之屏幕录像工具
  6. 华为鸿蒙系统支持什么手机_鸿蒙os2.0系统适配机型有哪些_华为鸿蒙系统支持的手机型号...
  7. 使用picard评估文库复杂度
  8. tkinter显示多行内容的表格单元
  9. 数据分析—python中透视表的使用
  10. 曼彻斯特编码|查分曼彻斯特编码|不归零码