我的物联网项目(二十七) 分布式锁粗心导致大量阻塞

有天项目中某个业务出现了异常，查询相关日志显示如下：

### Error updating database. Cause: com.mysql.jdbc.exceptions.jdbc4.MySQLTransactionRollbackException: Lock wait timeout exceeded; try restarting transaction

吓了大跳，居然还有锁时间过长导致后面的业务等待时间较长断开连接抛异常，看了下数据库控制台基本全黄，都是些执行时间较长正在执行的进程。

里面详细的SQL，继续点进去看看执行计划

从执行计划上看，扫码行数其实并不多的，所以还要从具体的业务场景去分析问题。

找到执行这条SQL的业务代码，了解当时的业务场景：

t_affairsevent事件表

简单描述下，这个事件表是用来做分布式事务，利用分布式调度来轮询，然后处理相关业务，具体可以看前面写过我的物联网项目(八) 简单分布式调度，前面有讲到过利用setNX()来实现分布式锁，每次通过setNX()同一个标识，比如id来抢占锁，前面的业务场景没有问题，但是在这个业务场景里面问题来了，因为同时3个调度来分别执行id为1，2，3的3条记录都可以抢的到，然后都去执行如下SQL：

update t_partner_bymonth set .... where partnerId=10001 ，这样的话会导致多个SQL线程同时在执行同一记录，而且本身update就带锁行，所以导致执行速度巨慢甚至阻塞。

高并发update时，最先获得锁的会优先执行，其它几条处于行锁等待状态，等第一个执行完毕，行锁释放，由下一条语句获取锁进行更新，当其它会话等待的时间达到innodb_lock_wait_timeout(默认是50秒)，这些update就会断开，不再执行。

像这种业务场景，将锁标识换成partnerId就可以避免刚才那种情况。

我的物联网项目(二十七) 分布式锁粗心导致大量阻塞相关推荐

我的物联网项目(二十三) 统计数据优化
平台无论是城市合伙人,还是商家,都有大量的统计数据的需求,比如统计商家一个月的总金额收入,投币消费总金额,微信扫码消费总金额等.这块的优化也一直在做,大概分为这么几个阶段. 1.实时count统计订单 ...
【甄选靶场】Vulnhub百个项目渗透——项目二十七：Pinkys-Palace-2（LFI，端口敲震，ssh爆破，64位缓冲区溢出）
Vulnhub百个项目渗透 Vulnhub百个项目渗透--项目二十七:Pinkys-Palace-2(LFI,端口敲震,ssh爆破,64位缓冲区溢出) 靶场地址
物联网项目(二)初建团队
今年三月初也是机缘巧合下接触这个项目,说实话也是非常看好这个项目,以前做过企业级项目,互联网项目,但是物联网项目也是第一次接触,相关资料了解了下何为物联网,原来是物物相连的互联网,与传统行业相结合的互 ...
spring项目使用redis分布式锁解决重复提交问题
场景演示假设有一个录入学生信息的功能,为了便于演示,要求不能有重名的学生,并且数据库对应字段没有做唯一限制. @GetMapping("/student/{name}")publ ...
多级缓存分析篇(二) 常用分布式锁分析
上篇主要讲了日常经常使用的哪些redis包及其配置的差异,这篇对基于redis的分布式锁,主要分享下自定义锁和redisson锁的使用和分析. 1.(自定义)Redis分布式锁对于redis来说,非 ...
项目演化系列--分布式锁
前言项目初期的时候,一般会发布到一台主机上,当达到负载极限时,要想提升其性能,要么提升硬件,要么多台主机,然而成本上的花销,后者比前者便宜太多了,虽然便宜,但是却更加复杂. 大多数编程语言提供的各种 ...
我的物联网项目(二十一) 摇摇车三种消费模式和城市合伙人
我们的摇摇车支持三种消费模式: 1.投币和传统摇摇车一样,通过一元的硬币来启动摇摇车,公司其实在做这个平台当时的初衷是不做投币的,只做app扫码,一来方便用户,毕竟这几年来流行各种扫码.二来做线上运 ...
我的物联网项目(二十九) 线上前期运营
说实话,线上运营不是我们的强项,公司的大部分人对线上的运营想法都有一箩筐,谈起线上运营的内容,都是神采奕奕,滔滔不绝,感觉钱就在眼前,触手可及.我自己也一度认为,平台有了用户,有了流量,做线上的任何内 ...
我的物联网项目(二十) 合伙人羊毛党
城市合伙人平台上线后,对于系统监控最关心的两个事情就是用户和订单,其中以订单最为重心.原因很简单,因为外面很多城市合伙人陆续加入进来,摇摇车的流量入口越来越大,新注册的app用户和启动摇摇车产生的订单 ...

我的物联网项目(二十七) 分布式锁粗心导致大量阻塞

我的物联网项目(二十七) 分布式锁粗心导致大量阻塞相关推荐

最新文章

热门文章