自建kafka和公有云kafka对比
阿里云相关文档:
开源对比:开源对比 - 产品简介| 阿里云
使用限制:使用限制 - 产品简介| 阿里云
存储引擎对比 :存储引擎对比 - 产品简介| 阿里云
腾讯云相关文档:
开源对比:消息队列 CKafka 开源对比 - 产品简介 - 文档中心 - 腾讯云
使用限制:消息队列 CKafka 使用限制 - 产品简介 - 文档中心 - 腾讯云
类型 |
数据过期时间 |
支持版本 |
是否暴露zk |
副本数 |
磁盘自动扩容 |
查看消息 |
升级版本 |
Topic数量 |
自动创建topic |
---|---|---|---|---|---|---|---|---|---|
自建 | 自定义 | 自定义 | 是 | 自定义 | 不支持 | kafdrop | 支持 | 无限制 | 支持 |
阿里云 |
24小时~720小时 磁盘容量不足85%自动删数据 |
0.10.x~2.x版本 | 否 | 3副本 | 不支持 | 控制台 | 支持 |
无限制 要收费 |
不支持 |
腾讯云 |
24 ~ 2160 小时 磁盘容量不足90%自动删数据 |
0.9、0.10、1.1 、 2.4、2.8版本 |
否 | 默认2副本,支持3副本 | 支持 | 控制台 | 不支持 | 最多50个 | 支持 |
公有云kafka的优势:
1、节省运维成本,部署/监控/扩容方便
2、稳定性好,高SLA保障
3、腾讯云kafka可以查看topic生产端连接关系
公有云kafka的劣势:
1、数据保存时间不一定可以满足公司的需求
2、不暴露zk,无法接入kafdrop和kafka manager,开发查看数据不方便,运维需要在不同账号直接切换,增加运维成本
3、资源成本比较高,一是磁盘费用,二是流量费用,三是规格费用
使用建议
1、注意监控磁盘使用率,设置合理阈值,及时处理,以免造成数据误删;
2、阿里云kafka如果有Compact、幂等、事务、分区顺序消息等需求,建议选择Local存储;
3、由于阿里云和腾讯云不暴露zk,因此无法接入kafdrop,kafka manager等工具,查看消息和日常运维需要在控制台执行;
4、阿里云kafka升级配置可能会短暂不可用或者消息乱序,谨慎操作;升级消息队列Kafka版实例的流量规格时,可能会触发集群横向扩容,需要进行Topic引流
综上,公有云适合存储时间不长,topic数量不多,开发不经常查看数据等要求,网站活动跟踪、日志聚合、流计算处理等应用场景。
自建kafka和公有云kafka对比相关推荐
- 自建私有云与公有云托管对比_共享托管和云托管的比较以及如何选择
自建私有云与公有云托管对比 Do you keep hearing about cloud hosting and wonder how it differs from a regular hosti ...
- 星外等linux主机管理,星外主机管理系统与ZKEYS公有云管理系统对比
一.简介 1.星外主机管理系统(官网) 一套庞大虚拟主机管理软件,它由主控端和 受控端组成,又是一套用于服务器安全保障星外安全包的软件 .主机管理软件和安全包组成一套坚固的虚拟主机管理系统,他们相互配 ...
- 公有云的未来:要么统治世界,要么灭亡
长久以来,私有云厂商都被一朵乌云笼罩着:私有云是否是一个伪命题,这个世界是否终将被公有云统治?无论如何振振有词,当2006年3月14日亚马逊向全世界宣布其公有云服务AWS时,IT的历史车轮就碾入了公有 ...
- 紫光进入公有云:板凳要坐十年冷,文章不写半句空
历史学家范文澜曾有一自勉联:"板凳要坐十年冷:文章不写一句空":南京大学教授韩儒林也曾一联:"板凳要坐十年冷:文章不写半句空".2017年底,紫光集团董事长赵伟 ...
- 公有云与私有云对比分析报告
转载自:http://www.hengtianyun.com/download-show-id-4.html 现如今,云计算这个概念越来越耳熟能详,不管是谁都能说出一些对云计算的理解,仿佛现在聊IT. ...
- 朱大能求职之旅-为什么使用消息队列?消息队列有什么优缺点?Kafka/Activemq/Rabbitmq/Rocketmq优缺点对比?
1. 面试题 为什么使用消息队列啊?消息队列有什么优点和缺点啊?kafka.activemq.rabbitmq.rocketmq都有什么区别以及适合哪些场景? 2. 面试官心理分析 其实面试官主要是想 ...
- TiDB 在 UCloud 公有云上的实践
原文来源: https://tidb.net/blog/c911abce 本文系上海 TUG 活动 "TiDB + Cloud" 实录整理,作者:UCloud 资深研发工程师 常彦 ...
- 火山引擎 DataLeap 的 Data Catalog 系统公有云实践
Data Catalog 通过汇总技术和业务元数据,解决大数据生产者组织梳理数据.数据消费者找数和理解数的业务场景.本篇内容源自于火山引擎大数据研发治理套件 DataLeap 中的 Data Cata ...
- 云计算技术架构-云计算四种模式(公有云、私有云、混合云、行业云)
接下来几篇主要从技术角度介绍云计算的架构: 云计算四种模式:公有云.私有云.混合云和行业云(本文讲述) 云计算架构:基础架构层.云平台层.业务应用层和业务管理层 云计算服务模式:IaaS. ...
最新文章
- MindSpore接口mindspore::api
- 简单 描述oracle 存储结构,下面的各选项中哪一个正确描述了
- mysql 5.1默认缓存_mysql的innodb数据库引擎详解
- MongoDB集群分片部署指南
- 最适合新手的手动搭建wamp环境教程
- 循环体中对集合进行增删时报错:java.util.ConcurrentModificationException
- doc转换html软件,Doc文件格式转换工具(CoolUtils Total Doc Converter)
- 手机3D建模初现端倪,预计今年市场规模将达1.45亿美元
- IT,大一,这里我有点建议
- 使用iRedMail 搭建邮件服务器
- 网络安全协议—SSL
- 我国南北居民收入差距 正在扩大。
- 你以为你在利用碎片化时间,实际上你的时间被碎片化了
- android 系统秒表,android自定义秒表(精确到0.1s,带计次功能)
- Anki 学习指南(优质资源 教程总结)
- 分享你喜欢的杀毒软件
- SQL 创建、更新、删除表、重命表名
- 微软官方原版本下载msdn
- 调用钉钉api报错:机器人发送签名过期;solution:签名生成时间和发送时间请保持在 timestampms 以内
- nuget 的生成、发布、使用和更新