kafka和mqtt的区别是什么？

两者都是从传统的Pub/Sub消息系统演化出来的，但是进化方向不一样，比较如下：

Kafka是为了数据集成的场景，
与以往Pub/Sub消息总线不一样，
通过分布式架构提供了海量消息处理、高容错的方式存储海量数据流、保证数据流的顺序等特性。

MQTT是为了物联网场景而优化，
不但提供多个QoS选项（exact once、at least once、at most once），
而且还有层级主题、遗嘱等等特性。

两者都是传统消息中间件与不同的业务场景结合的产物。
两者却可以结合起来使用，
比如用MQTT接受物联网设备上传的数据，然后接入Kafka，最后可以同时分发到HDFS归档、数据仓库做OLAP分析、Elasticsearch做全文检索，
这样的架构非常适合大型物联网项目，不但能够处理海量数据同时也具有很好的扩展性。

作者：张琪
链接：https://www.zhihu.com/question/30343125/answer/81954454
来源：知乎
著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。

转载于:https://www.cnblogs.com/lexiaofei/p/8203609.html

kafka和mqtt的区别是什么？相关推荐

Kafka消息中间件（Kafka与MQTT区别）
文章目录 Kafka Kafka重要原理 Topic 主题 Partition 分区 Producer 生产者 Consumer 消费者 Broker 中间件 Offset 偏移量 Kafka与mqt ...
kafka权威指南_Kafka-分区、片段、偏移量
[分区.片段.偏移量] 1. 每个分区是由多个Segment组成,当Kafka要写数据到一个partition时,它会写入到状态为active的segment中.如果该segment被写满,则一个新的 ...
LwM2M与MQTT的区别是什么？哪个更适合IoT
正如智能设备是IoT的核心一样,设备管理是每一个IoT部署的核心.因此,IoT协议的选择对大多数IoT项目很重要.这里对LwM2M(一种用于管理资源受限(不仅是)的设备的领先标准)和MQTT(一种流行 ...
物联网协议之一：MQTT协议和kafka
物联网协议之一:MQTT协议 MQTT 入门介绍 MQTT 入门介绍 | 菜鸟教程微消息队列MQTT与RocketMQ/Kafka/RabbitMQ区别_jack361博客 (618条消息) web ...
MQTT初始篇笔记整理
MQTT简介 MQTT(Message Queuing Telemetry Transport,消息队列遥测传输),基于TCP/IP 协议栈而构建,虽然叫消息队列遥测传输,但是她与消息队列毫无关系,她 ...
tcp实时传输kafka数据_将物联网数据和MQTT消息流式传输到Apache Kafka
Apache Kafka是一个实时流媒体平台,在大型和小型组织中得到广泛采用.Kafka的分布式微服务架构和发布/订阅协议使其成为在企业系统和应用程序之间移动实时数据的理想选择.据一些人称,超过三分之 ...
Kafka集群部署搭建完美标准版
Kafka集群部署并启动在本文中将从演示如何搭建一个Kafka集群开始,然后简要介绍一下关于Kafka集群的一些基础知识点.但本文仅针对集群做介绍,对于Kafka的基本概念不做过多说明,这里假设读者 ...
thingsboard往kafka推送数据
thingsboard支持很多类型的外部输出,如下图所示: 比如kafka.mqtt.rabbitmq.send email等,所以我们只需要添加kafka的rule node到规则链即可我们看到前 ...
聊聊 Kafka：Kafka 消息重复的场景以及最佳实践
一.前言上一篇我们讲了聊聊 Kafka:Kafka 消息丢失的场景以及最佳实践,这一篇我们来说一说 Kafka 消息重复的场景以及最佳实践. 我们下面会从以下两个方面来说一下 Kafka 消息重复 ...

kafka和mqtt的区别是什么？

kafka和mqtt的区别是什么？相关推荐

最新文章

热门文章