一、实验环境

Lunix系统:Centos7.5

安装软件:rabbitmq

开发工具:IDEA

二、实验目的

Rabbitmq实现多系统间的分布式事务,保证数据一致性

三、实验方案

rabbitmq作为消息中间件

订单中心和运单中心分别作为消息的生产者和消息的消费者,通过rabbitmq传递消息

订单中心作为生产者,模拟用户创建订单,在本地持久化订单信息,记录消息的状态信息,并将消息发送到rabbitmq,同时开启confirm机制,接收消息中间件rabbitmq的响应信息,更新本地消息发送状态(定时任务轮训消息状态信息表,一定时间内未发送成功的数据将再次发起推送,保证atlestonce.

运单中心作为消费者,消费rabbitmq中的订单信息,开启ack确认机制,确保不遗漏订单。并通过消息全局唯一ID保证数据的唯一性,不重复处理订单。

四、实验步骤

1、消息队列

1.1 rabbitmq安装过程略过。。。。
1.2 创建订单交换器:orderExchange

1.3 创建订单队列:orderQueue

1.4 绑定

2、数据库准备

 2.2 消息发送状态表

2.3 运单表

3、订单中心

3.1 订单中心分析

 利用Rabbitmq发布确认机制(confirm),确保发送成功的数据能被通知到 做个定时任务轮训发送失败以及发送后未响应的订单信息,重新发送。

3.2 编写代码

3.2.1 Springboot整合rabbitmq和mysql数据库

3.2.1.1依赖如下:


<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-web</artifactId>
</dependency>
<!--rabbitmq-->
<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-amqp</artifactId>
</dependency>
<!--mysql-->
<dependency><groupId>mysql</groupId><artifactId>mysql-connector-java</artifactId><scope>runtime</scope>
</dependency>
<!--lombok-->
<dependency><groupId>org.projectlombok</groupId><artifactId>lombok</artifactId><optional>true</optional>
</dependency>
<!--jdbc-->
<dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-jdbc</artifactId>
</dependency>
<!--fastjson-->
<dependency><groupId>com.alibaba</groupId><artifactId>fastjson</artifactId><version>1.2.17</version>
</dependency>

3.2.1.2配置文件内容:

server:port: 8080spring:datasource:driver-class-name: com.mysql.cj.jdbc.Driverurl: jdbc:mysql://localhost:3306/test?useUnicode=true&characterEncoding=UTF-8&useSSL=false&serverTimezone=GMT%2B8&allowMultiQueries=trueusername: rootpassword: root123rabbitmq:host: localhostport: 5672username: adminpassword: admin123virtual-host: /#必须配置这个,生产者才会确认回调publisher-confirm-type: correlatedpublisher-returns: true#重要,手动开启消费者ACK,控制消息在MQ中的删除、重发listener:simple:acknowledge-mode: MANUAL

3.2.2 订单中心代码


import com.alibaba.fastjson.JSONObject;
import lombok.extern.slf4j.Slf4j;
import org.springframework.amqp.rabbit.connection.CorrelationData;
import org.springframework.amqp.rabbit.core.RabbitTemplate;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.jdbc.core.JdbcTemplate;
import org.springframework.stereotype.Service;import javax.annotation.PostConstruct;
import java.beans.Transient;/*** 订单中心*/
@Slf4j
@Service
public class OrderService {@Autowiredprivate JdbcTemplate jdbcTemplate;@Autowiredprivate RabbitTemplate rabbitTemplate;@PostConstructpublic void setup(){//消息发送完成后,则回调此方法,ack代表此方法是否发送成功rabbitTemplate.setConfirmCallback(new RabbitTemplate.ConfirmCallback(){@Overridepublic void confirm(CorrelationData correlationData, boolean ack, String cause) {//ack为true,代表MQ已经准确收到消息if(!ack){return;}try{String sql = "update tb_msgstatus set status = 1 where msgid = ?";int count = jdbcTemplate.update(sql,correlationData.getId());if(count != 1){log.warn("本地消息表状态修改失败");}}catch (Exception e){log.warn("本息消息表状态修改异常",e);}}});}/*** 创建订单信息* @param order 订单信息* @throws Exception*/public void createOrder(JSONObject order) throws Exception {//保存订单信息saveOrder(order);//发送MQ消息,直接发送时不可靠,可能会失败(发送后根据回执修改状态表,定时任务扫表读取失败数据重新发送)sendMsg(order);}/*** 发送订单信息至MQ* @param order 订单信息*/private void sendMsg(JSONObject order) {//发送消息到MQ,CorrelationData作用:当收到消息回执时会带上这个参数rabbitTemplate.convertAndSend("orderExchange","",order.toJSONString(),new CorrelationData((String) order.get("orderid")));}/*** 保存订单信息* @param order 订单信息* @throws Exception*/@Transientprivate void saveOrder(JSONObject order) throws Exception {String sql = "insert into tb_order (orderid,userid,goodsid,ordertime) values (? , ? , ? , now())";//保存订单信息int count = jdbcTemplate.update(sql,order.get("orderid"),order.get("userid"),order.get("goodsid"));if(count != 1){throw new Exception("订单创建失败");}//保存消息发送状态saveLocalMsg(order);}/*** 记录消息发送状态* @param order 订单信息* @throws Exception*/private void saveLocalMsg(JSONObject order) throws Exception {String sql = "insert into tb_msgstatus (msgid,msg,status,sendtime) values (? , ? , 0 , now())";//记录消息发送状态int count = jdbcTemplate.update(sql,order.get("orderid"),order.toJSONString());if(count != 1){throw new Exception("记录消息发送状态失败");}}
}

3.3 订单中心测试

3.3.1 测试代码

@Autowired
private OrderService orderService;@Test
public void orderServiceTest() throws Exception {//生成订单信息JSONObject orderinfo = new JSONObject();orderinfo.put("orderid",UUID.randomUUID().toString());orderinfo.put("userid",UUID.randomUUID().toString());orderinfo.put("goodsid",UUID.randomUUID().toString());orderService.createOrder(orderinfo);
}

3.3.2 测试验证结果

orderQueue消息队列中已经接收到数据

订单表里的数据  

状态表数据:

4、运单中心

4.1 运单中心分析

消费者收到消息进行处理,处理成功则发送ACK消息通知MQ清除该条记录,否则通知MQ重发或者等待MQ自动重发。本地维护一个处理次数,如果多次处理仍然失败,则将该消息丢弃或者加入到死信队列(DLQ)中。死信队列中的数据可以人工干预。

4.2 编写代码

import com.alibaba.fastjson.JSONObject;
import com.rabbitmq.client.Channel;
import lombok.extern.slf4j.Slf4j;
import org.springframework.amqp.rabbit.annotation.RabbitListener;
import org.springframework.amqp.support.AmqpHeaders;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.jdbc.core.JdbcTemplate;
import org.springframework.messaging.handler.annotation.Header;
import org.springframework.stereotype.Service;import java.beans.Transient;
import java.io.IOException;/*** 运单系统*/
@Slf4j
@Service
public class DispatchService {@Autowiredprivate JdbcTemplate jdbcTemplate;@RabbitListener(queues = "orderQueue")public void messageCunsumer(String message, Channel channel, @Header(AmqpHeaders.DELIVERY_TAG) long tag) throws IOException {try{//MQ里面的数据转换成JSON数据JSONObject orderInfo = JSONObject.parseObject(message);log.warn("收到MQ里面的消息:" + orderInfo.toJSONString());Thread.sleep(1000L);//执行业务操作,同一个数据不能处理两次,根据业务情况去重,保证幂等性String orderid = orderInfo.getString("orderid");//分配快递员配送dispatch(orderid);//ack 通知MQ数据已经收到channel.basicAck(tag,false);}catch (Exception e){//异常情况,需要根据需求去重发或者丢弃//重发一定次数后丢弃,日志告警(rabbitmq没有设置重发次数功能,重发时需要代码实现,比如使用redis记录重发次数,)channel.basicNack(tag,false,false);//系统关键数据异常,需要人工干预}//如果不给确认回复,就等这个consumer断开连接后,MQ会继续推送}/*** 分配快递员* @param orderid 订单编号*/@Transientprivate void dispatch(String orderid) throws Exception {String sql = "insert into tb_dispatch (orderid,courier,status) values (?,?,?)";int count = jdbcTemplate.update(sql,orderid,"东哥","配送中");if(count != 1){throw new Exception("调度数据插入失败,原因[数据库操作]");}}
}

4.3 订单中心测试

启动springboot后自动监听MQ中的消息队列,自动处理

测试结果如下:

RabbitMQ实现分布式事务,保证数据一致性相关推荐

  1. 有一说一!这才是RabbitMQ实现分布式事务的正确姿势(项目实战)

    分布式事务 随着互联网快速发展,微服务,SOA 等服务架构模式正在被大规模的使用,现在分布式系统一般由多个独立的子系统组成,多个子系统通过网络通信互相协作配合完成各个功能. 有很多用例会跨多个子系统才 ...

  2. rabbitmq 查询版本_基于rabbitmq解决分布式事务

    分布式事务要解决的问题是保证二个数据库数据的一致性,本地事务ACID属于刚性事务,基于CAP理论,分布式事务的核心要点柔性事务,最终一致性. 基于rabbitmq解决分布式事务要点如下 生产者采用发送 ...

  3. 基于RabbitMQ的分布式事务最终一致性解决方案

    1. 分布式事务 所谓事务,通俗一点讲就是一系列操作要么同时成功,要么同时失败.而分布式事务就是这一系列的操作在不同的节点上,那要如何保证事务的ACID特性呢. 原子性(atomicity).一个事务 ...

  4. 「项目实战」有一说一这才是RabbitMQ实现分布式事务的正确姿势(附源码)

    不懂就问 灵魂拷问之☞导盲犬禁止入内是给犬看的还是盲人看的? 各位巨佬们把答案留在评论区吧 分布式事务 随着互联网快速发展,微服务,SOA 等服务架构模式正在被大规模的使用,现在分布式系统一般由多个独 ...

  5. 数据库:分布式事务的解决方案

    本节涉及到一些技术术语:2PC.CAP.BASE.RocketMQ.RabbitMQ.XA.Kafka.TCC 事务 在数据库系统中,一个事务是指:由一系列数据库操作组成的一个完整的逻辑过程.例如银行 ...

  6. MySQL分布式事务(XA事务)

    MySQL分布式事务(XA事务) 官网:https://dev.mysql.com/doc/refman/5.7/en/xa.html 1.什么是分布式事务 分布式事务就是指事务的参与者.支持事务的服 ...

  7. springboot整合oracle_SpringBoot2.x系列教程67--Spring Boot整合分布式事务简介

    SpringBoot2.x系列教程67--Spring Boot整合分布式事务简介 作者:一一哥 一. 分布式事务简介 1. 什么是分布式事务 百度百科对分布式事务的解释如下: 分布式事务就是指事务的 ...

  8. 分库分表学习总结(3)——深入理解分布式事务

    1.什么是分布式事务 分布式事务就是指事务的参与者.支持事务的服务器.资源服务器以及事务管理器分别位于不同的分布式系统的不同节点之上.以上是百度百科的解释,简单的说,就是一次大的操作由不同的小操作组成 ...

  9. 常用的分布式事务解决方案

    首页 博客 专栏·视频 下载 论坛 问答 代码 直播 能力认证 高校 会员中心 收藏 动态 消息 创作中心 常用的分布式事务解决方案 凌澜星空 2018-03-11 14:44:55  75315   ...

最新文章

  1. [Python爬虫] 之三十:Selenium +phantomjs 利用 pyquery抓取栏目
  2. linux 无响应_系统加固之Linux安全加固
  3. 超详细!使用OpenCV深度学习模块在图像分类下的应用实践
  4. 3A游戏的必备工艺! 天美是如何将动作捕捉运用到游戏中的?
  5. SAP CRM BCSet activation debug
  6. 5个Vue.js项目的令人敬畏的模板
  7. Java线程局部变量ThreadLocal
  8. 相位测试音频mp3_苹果AirPods MAX耳机音质一大短板在哪里?蓝牙AAC编码品质讨论与测试 「Soomal」...
  9. EmEditor 常用功能
  10. 检测提取图像中的直线(基于霍夫变换)
  11. hadoop与hive
  12. MFC SetTimer函数的用法
  13. web开发表情包---微信表情
  14. 华为鸿蒙系统的手机爆光图片,华为P50曝光,隐形镜头+麒麟9000E+鸿蒙系统,欣喜油然而生...
  15. spark sql中的first函数在多个字段使用实例
  16. HBUILDERX怎么导入html文件,HBuilderX使用教程 HBuilderX如何导入图片
  17. DW写的页面,在浏览者查看器中出现大量其他代码
  18. linux 恢复 raid5数据,Raid5数据恢复案例(raid阵列数据恢复方法)
  19. 参考 | 给C盘 “搬家“
  20. Python读取文件路径并移动到指定文件夹

热门文章

  1. [golang gin框架] 4.自定义Model以及Gin 文件上传
  2. Python基础_09:文件操作
  3. 输血40亿,能“拯救”亏损的四维图新吗?
  4. LeedCode 69. Sqrt(x)
  5. Bootstrap响应式布局案例- -阿里百秀
  6. 拨号上网,ADSL上网,光纤上网
  7. Leetcode--Java--389. 找不同
  8. sqlite 修改表的列
  9. php设置虚拟域名,如何开发一个虚拟域名系统
  10. [转]Theano下用CNN(卷积神经网络)做车牌中文字符OCR