前言

最近有个网友问了我一个问题:系统中大事务问题要如何处理?

正好前段时间我在公司处理过这个问题,我们当时由于项目初期时间比较紧张,为了快速完成业务功能,忽略了系统部分性能问题。项目顺利上线后,专门抽了一个迭代的时间去解决大事务问题,目前已经优化完成,并且顺利上线。现给大家总结了一下,我们当时使用的一些解决办法,以便大家被相同问题困扰时,可以参考一下。

大事务引发的问题

在分享解决办法之前,先看看系统中如果出现大事务可能会引发哪些问题

从上图可以看出如果系统中出现大事务时,问题还不小,所以我们在实际项目开发中应该尽量避免大事务的情况。如果我们已有系统中存在大事务问题,该如何解决呢?

解决办法

少用@Transactional注解

大家在实际项目开发中,我们在业务方法加上@Transactional注解开启事务功能,这是非常普遍的做法,它被称为声明式事务

部分代码如下:

   @Transactional(rollbackFor=Exception.class)public void save(User user) {doSameThing...}

然而,我要说的第一条是:少用@Transactional注解。

为什么?

  1. 我们知道@Transactional注解是通过springaop起作用的,但是如果使用不当,事务功能可能会失效。如果恰巧你经验不足,这种问题不太好排查。至于事务哪些情况下会失效,可以参考我之前写的《spring事务的这10种坑,你稍不注意可能就会踩中!!!》这篇文章。

  2. @Transactional注解一般加在某个业务方法上,会导致整个业务方法都在同一个事务中,粒度太粗,不好控制事务范围,是出现大事务问题的最常见的原因。

那我们该怎么办呢?

可以使用编程式事务,在spring项目中使用TransactionTemplate类的对象,手动执行事务。

部分代码如下:

   @Autowiredprivate TransactionTemplate transactionTemplate;...public void save(final User user) {transactionTemplate.execute((status) => {doSameThing...return Boolean.TRUE;})}

从上面的代码中可以看出,使用TransactionTemplate编程式事务功能自己灵活控制事务的范围,是避免大事务问题的首选办法。

当然,我说少使用@Transactional注解开启事务,并不是说一定不能用它,如果项目中有些业务逻辑比较简单,而且不经常变动,使用@Transactional注解开启事务开启事务也无妨,因为它更简单,开发效率更高,但是千万要小心事务失效的问题。

将查询(select)方法放到事务外

如果出现大事务,可以将查询(select)方法放到事务外,也是比较常用的做法,因为一般情况下这类方法是不需要事务的。

比如出现如下代码:

   @Transactional(rollbackFor=Exception.class)public void save(User user) {queryData1();queryData2();addData1();updateData2();}

可以将queryData1queryData2两个查询方法放在事务外执行,将真正需要事务执行的代码才放到事务中,比如:addData1updateData2方法,这样就能有效的减少事务的粒度。

如果使用TransactionTemplate编程式事务这里就非常好修改。

   @Autowiredprivate TransactionTemplate transactionTemplate;...public void save(final User user) {queryData1();queryData2();transactionTemplate.execute((status) => {addData1();updateData2();return Boolean.TRUE;})}

但是如果你实在还是想用@Transactional注解,该怎么拆分呢?

    public void save(User user) {queryData1();queryData2();doSave();}@Transactional(rollbackFor=Exception.class)public void doSave(User user) {addData1();updateData2();}

这个例子是非常经典的错误,这种直接方法调用的做法事务不会生效,给正在坑中的朋友提个醒。因为@Transactional注解的声明式事务是通过spring aop起作用的,而spring aop需要生成代理对象,直接方法调用使用的还是原始对象,所以事务不会生效。

有没有办法解决这个问题呢?

1.新加一个Service方法

这个方法非常简单,只需要新加一个Service方法,把@Transactional注解加到新Service方法上,把需要事务执行的代码移到新方法中。具体代码如下:

  @Servciepublic class ServiceA {@Autowiredprvate ServiceB serviceB;public void save(User user) {queryData1();queryData2();serviceB.doSave(user);}}@Servciepublic class ServiceB {@Transactional(rollbackFor=Exception.class)public void doSave(User user) {addData1();updateData2();}}

2.在该Service类中注入自己

如果不想再新加一个Service类,在该Service类中注入自己也是一种选择。具体代码如下:

  @Servciepublic class ServiceA {@Autowiredprvate ServiceA serviceA;public void save(User user) {queryData1();queryData2();serviceA.doSave(user);}@Transactional(rollbackFor=Exception.class)public void doSave(User user) {addData1();updateData2();}}

可能有些人可能会有这样的疑问:这种做法会不会出现循环依赖问题?

其实spring ioc内部的三级缓存保证了它,不会出现循环依赖问题。如果你想进一步了解循环依赖问题,可以看看我之前文章《spring解决循环依赖为什么要用三级缓存?》。

3.在该Service类中使用AopContext.currentProxy()获取代理对象

上面的方法2确实可以解决问题,但是代码看起来并不直观,还可以通过在该Service类中使用AOPProxy获取代理对象,实现相同的功能。具体代码如下:

  @Servciepublic class ServiceA {public void save(User user) {queryData1();queryData2();((ServiceA)AopContext.currentProxy()).doSave(user);}@Transactional(rollbackFor=Exception.class)public void doSave(User user) {addData1();updateData2();}}

事务中避免远程调用

我们在接口中调用其他系统的接口是不能避免的,由于网络不稳定,这种远程调的响应时间可能比较长,如果远程调用的代码放在某个事物中,这个事物就可能是大事务。当然,远程调用不仅仅是指调用接口,还有包括:发MQ消息,或者连接redis、mongodb保存数据等。

   @Transactional(rollbackFor=Exception.class)public void save(User user) {callRemoteApi();addData1();}

远程调用的代码可能耗时较长,切记一定要放在事务之外。

   @Autowiredprivate TransactionTemplate transactionTemplate;...public void save(final User user) {callRemoteApi();transactionTemplate.execute((status) => {addData1();return Boolean.TRUE;})}

有些朋友可能会问,远程调用的代码不放在事务中如何保证数据一致性呢?这就需要建立:重试+补偿机制,达到数据最终一致性了。

事务中避免一次性处理太多数据

如果一个事务中需要处理的数据太多,也会造成大事务问题。比如为了操作方便,你可能会一次批量更新1000条数据,这样会导致大量数据锁等待,特别在高并发的系统中问题尤为明显。

解决办法是分页处理,1000条数据,分50页,一次只处理20条数据,这样可以大大减少大事务的出现。

非事务执行

在使用事务之前,我们都应该思考一下,是不是所有的数据库操作都需要在事务中执行?

   @Autowiredprivate TransactionTemplate transactionTemplate;...public void save(final User user) {transactionTemplate.execute((status) => {addData();addLog();updateCount();return Boolean.TRUE;})}

上面的例子中,其实addLog增加操作日志方法 和 updateCount更新统计数量方法,是可以不在事务中执行的,因为操作日志和统计数量这种业务允许少量数据不一致的情况。

   @Autowiredprivate TransactionTemplate transactionTemplate;...public void save(final User user) {transactionTemplate.execute((status) => {addData();           return Boolean.TRUE;})addLog();updateCount();}

当然大事务中要鉴别出哪些方法可以非事务执行,其实没那么容易,需要对整个业务梳理一遍,才能找出最合理的答案。

异步处理

还有一点也非常重要,是不是事务中的所有方法都需要同步执行?我们都知道,方法同步执行需要等待方法返回,如果一个事务中同步执行的方法太多了,势必会造成等待时间过长,出现大事务问题。

看看下面这个列子:

   @Autowiredprivate TransactionTemplate transactionTemplate;...public void save(final User user) {transactionTemplate.execute((status) => {order();delivery();return Boolean.TRUE;})}

order方法用于下单,delivery方法用于发货,是不是下单后就一定要马上发货呢?

答案是否定的。

这里发货功能其实可以走mq异步处理逻辑。

   @Autowiredprivate TransactionTemplate transactionTemplate;...public void save(final User user) {transactionTemplate.execute((status) => {order();return Boolean.TRUE;})sendMq();}

总结

本人从网友的一个问题出发,结合自己实际的工作经验分享了处理大事务的6种办法:

  1. 少用@Transactional注解

  2. 将查询(select)方法放到事务外

  3. 事务中避免远程调用

  4. 事务中避免一次性处理太多数据

  5. 非事务执行

  6. 异步处理

最后说一句

如果这篇文章对您有所帮助,或者有所启发的话,帮忙扫描下发二维码关注一下,或者点赞、转发、在看。在公众号中回复:面试、代码神器、开发手册、时间管理有超赞的粉丝福利,另外回复:加群,可以跟很多大厂的前辈交流和学习。

热门内容:
  • 你的登录接口真的安全吗?

  • 微服务架构:注册中心 ZooKeeper、Eureka、Consul 、Nacos 对比!

  • 图解ElasticSearch 搜索原理

  • 优雅地处理重复请求(并发请求)——附Java实现

  • SpringBoot集成Swagger-Bootstrap-UI,页面更清爽!

最近面试BAT,整理一份面试资料《Java面试BAT通关手册》,覆盖了Java核心技术、JVM、Java并发、SSM、微服务、数据库、数据结构等等。获取方式:点“在看”,关注公众号并回复 666 领取,更多内容陆续奉上。
明天见(。・ω・。)ノ♡

让人头痛的大事务问题到底要如何解决?相关推荐

  1. 事务嵌套问题_注意Spring事务这一点,避免出现大事务

    背景 本篇文章主要分享压测的(高并发)时候发现的一些问题.之前的两篇文章已经讲述了在高并发的情况下,消息队列和数据库连接池的一些总结和优化,有兴趣的可以在我的公众号中去翻阅.废话不多说,进入正题. 事 ...

  2. 两个service事务统一_拜托,别再让我优化大事务了,我的头都裂了

    前言 最近有个网友问了我一个问题:系统中大事务问题要如何处理? 正好前段时间我在公司处理过这个问题,我们当时由于项目初期时间比较紧张,为了快速完成业务功能,忽略了系统部分性能问题.项目顺利上线后,专门 ...

  3. 如何处理SQL Server事务复制中的大事务操作

    如何处理SQL Server事务复制中的大事务操作 事务复制的工作机制 事务复制是由 SQL Server 快照代理.日志读取器代理和分发代理实现的.快照代理准备快照文件(其中包含了已发布表和数据库对 ...

  4. mysql大事务导致系统变慢_MySQL因大事务导致的Insert慢实例分析

    [问题] INSERT语句是最常见的SQL语句之一,最近有台MySQL服务器不定时的会出现并发线程的告警,从记录信息来看,有大量insert的慢查询,执行几十秒,等待flushing log,状态qu ...

  5. MySQL-性能优化_大表和大事务的常用处理方案

    文章目录 生猛干货 官方文档 影响MySQL性能的几大因素 大表带来的风险 大表的定义 大表带来的风险 如何应对大表? 大事务带来的风险 基本特性:ACID SQL标准中的4个隔离级别 Read Co ...

  6. mysql 打印_故障分析 | MySQL:5.6大事务show engine innodb status故障一例

    作者:高鹏(网名八怪) 文章末尾有他著作的<深入理解 MySQL 主从原理 32 讲>,深入透彻理解 MySQL 主从,GTID 相关技术知识. 本文来源:转载自公众号-老叶茶馆, (作者 ...

  7. MySQL运维系列 之 如何监控大事务

    long transaction 背景 大家有没有遇到这样的情况 某个SQL执行特别慢,导致整个transaction一直处于running阶段 某个Session的SQL已经执行完了,但是迟迟没有c ...

  8. 面试官:什么是大事务?小林哥:就是 很大...的...事务??

    精彩推荐 一百期Java面试题汇总 SpringBoot内容聚合 IntelliJ IDEA内容聚合 Mybatis内容聚合 最近疫情期间跳槽不易,在外包公司工作了5年的小林在某直聘软件上边投递了好几 ...

  9. mysql dml回滚_mysql binlog回滚/闪回,前滚, 分析各表DML情况, 找出长事务与大事务...

    简介 binlog_inspector通过解释mysql/mariadb binlog/relaylog实现以下三大功能: 1)flashback/闪回/回滚, 实现DML的回滚到任意时间或者位置. ...

最新文章

  1. golang中的Mock依赖
  2. 第五章 深度神经网络为何很难训练
  3. java filter 注解_Spring常用注解及自定义Filter的实现
  4. 我的Linux内核学习笔记
  5. memcached客户端_分布式算法真是吊炸天 – memcached - 第287篇
  6. java8新特性(6)— 日期与时间
  7. IOS开发-UIView之动画效果的实现方法(合集)
  8. Linux配置自建 YUM 软件存储库
  9. 【2013】将x插入有序数列
  10. JavaScript模块化编程(总结)
  11. java运行环境JDK下载安装配置
  12. 无法连接数据库2003-cant connect to Mysql server on ‘localhost’(10038)
  13. python桌面精灵_360uu游戏盒子
  14. Linux驱动概念扫盲篇【转】
  15. 产品设计指南:如何从零设计一款手机端产品(APP)?
  16. 基于SpringBoot框架的网上购书系统的设计与实现
  17. 解决报错:Cause: java.sql.SQLSyntaxErrorException: Table 'myactiviti.act_ge_property' doesn't exist
  18. java根据拼音获取声调_Pinyin4j的基本用法 获得拼音的声调
  19. 导电滑环的工作原理是怎样的?
  20. OJ c语言第一次实验

热门文章

  1. 论文《一种金融市场预测的深度学习模型: FEPA》(4)----金融市场预测的架构--常见的数据降为方法
  2. UNL(Ubiquitous Navigation Lab)
  3. iOS 后台挂起的一些坑
  4. 客户端如何连接 DataSnap Server 调用服务的方法
  5. ueditor编辑器和at.js集成
  6. sql server 海量数据速度提升:SQL优化-索引(11) 【转】
  7. Winform程序怎么降低占用的内存?
  8. 【组队学习】【26期】编程实践(Django网站开发)
  9. 算法基础知识科普:8大搜索算法之二叉搜索树(中)
  10. 【Python】Listbox组件 Scrollbar组件 Scale组件