一、概述

ActiveMQ 是Apache出品,最流行的,能力强劲的开源消息总线。ActiveMQ 是一个完全支持JMS1.1和J2EE 1.4规范的 JMS Provider实现,尽管JMS规范出台已经是很久的事情了,但是JMS在当今的J2EE应用中间仍然扮演着特殊的地位。

在介绍activemq之前,先简单介绍JMS,它是J2EE的13个规范之一,提供的是消息中间件的规范。
1、JMS包括以下基本构件:

  1. 连接工厂
    是客户用来创建连接的对象,ActiveMQ提供的是ActiveMQConnectionFactory;
  2. 连接connection
  3. 会话session,是发送和接收消息的上下文,用于创建消息生产者,消息消费者,相比rocketMQ会话session是提供事务性的;
  4. 目的地destination,指定生产消息的目的地和消费消息的来源对象;
  5. 生产者,由会话创建的对象。
  6. 消费者,由会话创建的对象。

2、消息通信机制
点对点模式,每个消息只有1个消费者,它的目的地称为queue队列;
发布/订阅模式,每个消息可以有多个消费者,而且订阅一个主题的消费者,只能消费自它订阅之后发布的消息。
消息确认机制
Session.AUTO_ACKNOWLEDGE,直接使用receive方法。Session.CLIENT_ACKNOWLEDGE,通过消息的acknowledge 方法确认消息。Session.DUPS_ACKNOWLEDGE,该选择只是会话迟钝第确认消息的提交。如果JMS provider 失败,那么可能会导致一些重复的消息。如果是重复的消息,那么JMS provider 必须把消息头的JMSRedelivered 字段设置为true。

二、特性

⒈ 多种语言和协议编写客户端。语言: Java,C,C++,C#,Ruby,Perl,Python,PHP。应用协议: OpenWire,Stomp REST,WS Notification,XMPP,AMQP
⒉ 完全支持JMS1.1和J2EE 1.4规范 (持久化,XA消息,事务)
⒊ 对Spring的支持,ActiveMQ可以很容易内嵌到使用Spring的系统里面去,而且也支持Spring2.0的特性
⒋ 通过了常见J2EE服务器(如 Geronimo,JBoss 4,GlassFish,WebLogic)的测试,其中通过JCA 1.5 resource adaptors的配置,可以让ActiveMQ可以自动的部署到任何兼容J2EE 1.4 商业服务器上
⒌ 支持多种传送协议:in-VM,TCP,SSL,NIO,UDP,JGroups,JXTA
⒍ 支持通过JDBC和journal提供高速的消息持久化
⒎ 从设计上保证了高性能的集群,客户端-服务器,点对点
⒏ 支持Ajax
⒐ 支持与Axis的整合
⒑ 可以很容易的调用内嵌JMS provider,进行测试

三、安装(先使用ActiveMQ,然后讲原理)

参考我以前文章MQ(message queue)使用 Spring整合 MQ下载 五分钟上手使用 注:文档链接为SpringBoot整合ActiveMQ教程 文章开头为安装教程附下载

四、实现(先使用ActiveMQ,然后讲原理)

使用JMS原生API编写测试类,向消息中间件写入消息的开发步骤:

1 创建连接工厂
2 创建连接
3 启动连接
4 建立会话
5 创建队列
6 创建生产者
7 创建消息
8 发送消息
9 提交

  1. 导入依赖
<dependencies><dependency><groupId>org.apache.activemq</groupId><artifactId>activemq-all</artifactId><version>5.14.0</version></dependency>
</dependencies>
  • 编写生产者类
import org.apache.activemq.ActiveMQConnectionFactory;import javax.jms.*;public class ActiveMQProducter {public static void main(String[] args) throws Exception{// 连接工厂// 使用默认用户名、密码、路径// 因为:底层实现:final String defaultURL = "tcp://" + DEFAULT_BROKER_HOST + ":" + DEFAULT_BROKER_PORT;// 所以:路径 tcp://host:61616//1 创建连接工厂ActiveMQConnectionFactory connectionFactory = new ActiveMQConnectionFactory();//2 创建连接Connection connection = connectionFactory.createConnection();//3 打开连接connection.start();//4 创建会话//第一个参数:是否开启事务//第二个参数:消息是否自动确认Session session = connection.createSession(true, Session.AUTO_ACKNOWLEDGE);//创建队列Queue queue = session.createQueue("hello20181119");//5 创建生产者MessageProducer producer = session.createProducer(queue);//6 创建消息Message message = session.createTextMessage("helloworld");//7 发送消息producer.send(message);//8 关闭消息session.commit();producer.close();session.close();connection.close();System.out.println("消息生产成功");}
}

运行后结果 默认tcp连接activeMQ端口 61616 !!! 程序连接端口

查看网页 网页使用端口8161访问

访问:http://localhost:8161/ 点击:Manage ActiveMQ broker
用户名和密码 都是 admin


消费前:表示没有消费 有一个消息在队列中

  • 编写消费者
 import org.apache.activemq.ActiveMQConnectionFactory;import javax.jms.*;public class ActiveMQConsumer {public static void main(String[] args) throws Exception {//创建连接工厂ActiveMQConnectionFactory connectionFactory = new ActiveMQConnectionFactory();//创建连接Connection connection = connectionFactory.createConnection();//开启连接connection.start();//创建会话/** 第一个参数,是否使用事务如果设置true,操作消息队列后,必须使用 session.commit();如果设置false,操作消息队列后,不使用session.commit();*/Session session = connection.createSession(true, Session.AUTO_ACKNOWLEDGE);//创建队列Queue queue = session.createQueue("hello20181119");//创建消费者MessageConsumer consumer = session.createConsumer(queue);while(true){//失效时间,如果10秒内没有收到新的消息,说明没有消息存在,此时可以退出当前循环TextMessage message = (TextMessage) consumer.receive(10000);if(message!=null){System.out.println(message.getText());}else {break;}}//关闭连接session.commit();session.close();connection.close();System.out.println("消费结束0");}
}

注意:测试的时候一定先启动消费者,然后再启动生产者(Queue队列)
查看控制台,发现信息已经被消费

查看网页

  • 监听器消费消息
// 使用监听器消费
public static void main(String[] args) throws Exception {// 连接工厂// 使用默认用户名、密码、路径// 路径 tcp://host:61616ConnectionFactory connectionFactory = new ActiveMQConnectionFactory();// 获取一个连接Connection connection = connectionFactory.createConnection();// 开启连接connection.start();// 建立会话// 第一个参数,是否使用事务,如果设置true,操作消息队列后,必须使用 session.commit();Session session = connection.createSession(false,Session.AUTO_ACKNOWLEDGE);// 创建队列或者话题对象Queue queue = session.createQueue("hello20181119");// 创建消费者MessageConsumer messageConsumer = session.createConsumer(queue);messageConsumer.setMessageListener(new MessageListener() {// 每次接收消息,自动调用 onMessagepublic void onMessage(Message message) {TextMessage textMessage = (TextMessage) message;try {System.out.println(textMessage.getText());} catch (JMSException e) {e.printStackTrace();}}});//此时,不能让程序结束,如果结束,监听就结束了while (true) {// 目的:不能让程序死掉}
}

五、1、消息队列应用场景

以下介绍消息队列在实际应用中常用的使用场景。

异步处理,应用解耦,流量削锋和消息通讯四个场景

异步处理

场景说明:用户注册后,需要发注册邮件和注册短信。传统的做法有两种:

1.串行的方式;2.并行方式

(1)串行方式:将注册信息写入数据库成功后,发送注册邮件,再发送注册短信。以上三个任务全部完成后,返回给客户端

(2)并行方式:将注册信息写入数据库成功后,发送注册邮件的同时,发送注册短信。以上三个任务完成后,返回给客户端。与串行的差别是,并行的方式可以提高处理的时间

假设三个业务节点每个使用50毫秒钟,不考虑网络等其他开销,则串行方式的时间是150毫秒,并行的时间可能是100毫秒。

因为CPU在单位时间内处理的请求数是一定的,假设CPU在1秒内吞吐量是100次。则串行方式1秒内CPU可处理的请求量是7次(1000/150)。并行方式处理的请求量是10次(1000/100)

小结:如以上案例描述,传统的方式系统的性能(并发量,吞吐量,响应时间)会有瓶颈。如何解决这个问题呢?

引入消息队列,将不是必须的业务逻辑,异步处理。改造后的架构如下:

按照以上约定,用户的响应时间相当于是注册信息写入数据库的时间,也就是50毫秒。注册邮件,发送短信写入消息队列后,直接返回,因此写入消息队列的速度很快,基本可以忽略,因此用户的响应时间可能是50毫秒。因此架构改变后,系统的吞吐量提高到每秒20 QPS。比串行提高了3倍,比并行提高了2倍

应用解耦

场景说明:用户下单后,订单系统需要通知库存系统。传统的做法是,订单系统调用库存系统的接口。如下图 以我做的项目举例

传统模式的缺点:

l 假如库存系统无法访问,则订单减库存将失败,从而导致订单失败

l 订单系统与库存系统耦合

如何解决以上问题呢?引入应用消息队列后的方案,如下图:

  • 订单系统:用户下单后,订单系统完成持久化处理,将消息写入消息队列,返回用户订单下单成功

  • 库存系统:订阅下单的消息,采用pub/sub(发布/订阅)的方式,获取下单信息,库存系统根据下单信息,进行库存操作

  • 假如:在下单时库存系统不能正常使用。也不影响正常下单,因为下单后,订单系统写入消息队列就不再关心其他的后续操作了。实现订单系统与库存系统的应用解耦

流量削锋

流量削锋也是消息队列中的常用场景,一般在秒杀或团抢活动中使用广泛

应用场景:秒杀活动,一般会因为流量过大,导致流量暴增,应用挂掉。为解决这个问题,一般需要在应用前端加入消息队列。

  • 可以控制活动的人数
  • 可以缓解短时间内高流量压垮应用

  • 用户的请求,服务器接收后,首先写入消息队列。假如消息队列长度超过最大数量,则直接抛弃用户请求或跳转到错误页面
  • 秒杀业务根据消息队列中的请求信息,再做后续处理

日志处理

日志处理是指将消息队列用在日志处理中,比如Kafka的应用,解决大量日志传输的问题。架构简化如下

  • 日志采集客户端,负责日志数据采集,定时写受写入Kafka队列
  • Kafka消息队列,负责日志数据的接收,存储和转发
  • 日志处理应用:订阅并消费kafka队列中的日志数据

    (1)Kafka:接收用户日志的消息队列

(2)Logstash:做日志解析,统一成JSON输出给Elasticsearch

(3)Elasticsearch:实时日志分析服务的核心技术,一个schemaless,实时的数据存储服务,通过index组织数据,兼具强大的搜索和统计功能

(4)Kibana:基于Elasticsearch的数据可视化组件,超强的数据可视化能力是众多公司选择ELK stack的重要原因

消息通讯

消息通讯是指,消息队列一般都内置了高效的通信机制,因此也可以用在纯的消息通讯。比如实现点对点消息队列,或者聊天室等

点对点通讯:

客户端A和客户端B使用同一队列,进行消息通讯。

聊天室通讯:

客户端A,客户端B,客户端N订阅同一主题,进行消息发布和接收。实现类似聊天室效果。

以上实际是消息队列的两种消息模式,点对点或发布订阅模式。模型为示意图,供参考。

2、JMS消息服务

消息队列的JAVAEE规范JMS 。JMS(Java Message Service,java消息服务)API是一个消息服务的标准/规范,允许应用程序组件基于JavaEE平台创建、发送、接收和读取消息。它使分布式通信耦合度更低,消息服务更加可靠以及异步性。

2.1 消息模型

在JMS标准中,有两种消息模型P2P(Point to Point),Publish/Subscribe(Pub/Sub)。

2.2 P2P模式-队列模式

P2P模式包含三个角色:消息队列(Queue),发送者(Sender),接收者(Receiver)。每个消息都被发送到一个特定的队列,接收者从队列中获取消息。队列保留着消息,直到他们被消费或超时。

P2P的特点

l 每个消息只能被一个消费者(Consumer)消费(即一旦被消费,消息就不再存在于消息队列中)

l 发送者和接收者之间在时间上没有依赖性,也就是说当发送者发送了消息之后,不管接收者有没有正在运行,它不会影响到消息被发送到队列

l 接收者在成功接收消息之后需向队列应答成功

如果希望发送的每个消息都会被成功处理的话,那么需要P2P模式。

2.3 Pub/Sub模式–广播/主题模式

包含三个角色主题(Topic),发布者(Publisher),订阅者(Subscriber) 多个发布者将消息发送到Topic,系统将这些消息传递给多个订阅者。

Pub/Sub的特点

  • 每个消息可以有多个消费者
  • 发布者和订阅者之间有时间上的依赖性。针对某个主题(Topic)的订阅者,它必须创建一个订阅者之后,才能消费发布者的消息
  • 为了消费消息,订阅者必须保持运行的状态

为了缓和这样严格的时间相关性,JMS允许订阅者创建一个可持久化的订阅。这样,即使订阅者没有被激活(运行),它也能接收到发布者的消息。

如果希望发送的消息可以被多个消费者处理的话,那么可以采用Pub/Sub模型。

3.消息消费方式

在JMS中,消息的产生和消费都是异步的。对于消费来说,JMS的消息者可以通过两种方式来消费消息。

(1)同步
订阅者或接收者通过receive方法来接收消息,receive方法在接收到消息之前(或超时之前)将一直阻塞;

(2)异步
订阅者或接收者可以注册为一个消息监听器。当消息到达之后,系统自动调用监听器的onMessage方法。

祝你幸福
送你一首歌《I Really Like You》Anthem Lights
附图 QQ空间看到的一句话

---------------------
作者:HezhezhiyuLe
来源:CSDN
原文:https://blog.csdn.net/HezhezhiyuLe/article/details/84257120
版权声明:本文为作者原创文章,转载请附上博文链接!

[转]MQ(ActiveMQ)原理及介绍相关推荐

  1. MQ ActiveMQ入门介绍及核心原理

    1 概述 Apache下的一个非常流行的消息中间件,使用JAVA支持的JMS Provider实现,所以和JAVA程序完全兼容,开发java项目中间件首选.当然ActiveMQ不仅仅支持JAVA,在C ...

  2. 一篇带你读懂MQ——MQ的原理、持久化以及使用场景总结

    一.MQ简介及特点 MQ全称为Message Queue, 消息队列(MQ)是一种应用程序对应用程序的通信方法.应用程序通过写和检索出入列队的针对应用程序的数据(消息)来通信,而无需专用连接来链接它们 ...

  3. 消息队列(MQ)原理总结

    目录 1 概述 2 消息队列应用场景 2.1 异步处理 2.2 应用解耦 2.3 流量削峰 2.4 消息通讯 3 消息队列示例 3.1 电商系统 3.2 日志收集系统 4 常用消息队列 4.1 Act ...

  4. JAVA开发者大会:拍拍贷MQ系统原理与应用

    JAVA开发者大会:拍拍贷MQ系统原理与应用 --喜欢记得关注我哟[shoshana]-- 前记: 5月12号参加了JAVA开发者大会,就<拍拍贷消息系统原理及应用> 作者:李乘胜老师 关 ...

  5. shell编程入门 linux解释器原理,Shell编程入门Linux解释器原理详细介绍 使用Shell进行工作的人们对.doc...

    Shell编程入门Linux解释器原理详细介绍 使用Shell进行工作的人们对 Shell编程入门:Linux解释器原理详细介绍使用Shell进行工作的人们对Unix/Linux下的Shell编程都很 ...

  6. kinect v1原理_Kinect原理及介绍.ppt

    Kinect原理及介绍 三角化:激光+摄像头,双目,投影仪+摄像头等等 depth from focus技术 coded aperture技术 深度摄像头所采用的TOF(time of fight)技 ...

  7. MD5算法原理简要介绍并采用C#应用在桌面应用系统的用户登录与注册中

    MD5算法原理简要介绍并采用C#应用在桌面应用系统的用户登录与注册中 接上文,本文简要介绍一下MD5加密算法的原理,并采用C#实现MD5算法的加密与解密过程,将这一实现过程应用在我自己开发的桌面办公应 ...

  8. 文件包含漏洞(原理及介绍)

    文件包含漏洞(原理及介绍) File inclusion,文件包含(漏洞).程序开发人员通常出于灵活性的考虑,会将被包含的文件设置成变量,然后动态调用这些文件.但正是因为调用的灵活性导致用户可能调用一 ...

  9. BP神经网络原理简单介绍以及公式推导(矩阵形式和分量形式)

    BP神经网络原理简单介绍以及公式推导 标签(空格分隔): 神经网络 \def\net(#1){net^{(#1)}} \def\Y(#1){Y^{(#1)}} \def\part(#1){\parti ...

  10. HarmonyOS实战[一]——原理概念介绍安装:基础篇

    [本文正在参与"有奖征文|HarmoneyOS征文大赛"活动] 相关文章: HarmonyOS实战[一]--原理概念介绍安装:基础篇 HarmonyOS实战[二]-超级详细的原子化 ...

最新文章

  1. css之命名规范 BEM
  2. @Service注解的使用
  3. shell脚本中echo显示内容带颜色的实现方法
  4. 深入理解JVM虚拟机(二):垃圾回收机制
  5. 软件工程结对开发团队成员以及题目介绍
  6. Oracle原理:11g的体系结构
  7. 20、21_链式法则、MLP(多层感知器模型)反向传播
  8. 智能对话引擎:两天快速打造疫情问答机器人
  9. 【Project3】【web.xml分析】
  10. Spring启动的流程
  11. python 命令模式_python设计模式(十六):命令模式-阿里云开发者社区
  12. C# 各种常用集合类型的线程安全版本
  13. Codeforces 448 D. Multiplication Table
  14. SQL拼接自己需要的字符串
  15. NDK编译时指定NDK_MODULE_PATH的方法
  16. python选择排序代码_Python 数据结构与算法——选择排序(迭代版、递归版)
  17. Matlab 2016a安装和破解教程
  18. lodop php 快递单_lodop打印控件打印申通快递单
  19. backdrop-filter
  20. 百度android离线下载,离线宝app下载-百度离线宝 安卓版v1.0.0.0-PC6安卓网

热门文章

  1. jscript和javascript区别
  2. Android ZXing 解析
  3. 英语语音中的调核例子_英语调核研究.pdf
  4. Kafka多个消费者监听消费同一个Topic主题
  5. ping——判断两个设备是否在同一个局域网下
  6. KPM算法思想及实现
  7. java中的反射详解
  8. osgEarth示例分析——osgearth_los
  9. 六、redis中AKF问题解决方案
  10. 新春思考:如何用区块链与投证保护“一杯严选”「见茶卸甲」级好茶