kafka下载与安装教程
Kafka下载安装教程
- 1.定义
- 2.特性
- 3.使用场景
- 4.1.下载jar包
- 4.2.解压到指定的文件夹
- 4.3.修改配置文件
- 4.4.启动kafka内置的zookeeper
- 4.5.启动kafka服务
- 4.6.创建一个名为 test1 的tiopic的测试主体 kafka
- 4.7.创建生产消息的生产者
- 4.8.创建消息消费者接收消息
1.定义
Kafka传统定义:Kafka是一个分布式的基于发布/订阅模式的消息队列,主要应用于大数据实时处理领域。
发布/订阅:消息的发布者不会将消息直接发送给特定的订阅者,而是将发布的消息分为不同的类别,订阅者只接收感兴趣的消息。
Kafka最新定义:Kafka是一个开源的分布式事件流平台(Event Streaming Platform),被数千家公司用于高性能数据管道、流分析、数据集成和关键任务应用。
2.特性
- 高吞吐量
- 页缓存
- 追加写入
- 零拷贝
- 高可靠性
- 消息持久化,副本机制
- 解耦消息生产和消息消费
- 消息重演
- 高可用性
- 负载均衡
- 故障转移
- 高伸缩性
- 集群状态交由ZooKeeper管理
3.使用场景
- 消息投递
- 能够很好的代替传统的message broker。它提供了更强大的吞吐量,内建分区,复本,容错等机制来解决大规模消息处理型应用程序
- 日志收集
- 一个公司可以用Kafka可以收集各种服务的log,通过kafka以统一接口服务的方式开放给各种consumer
- 运营指标
- kafka也经常用来记录运营监控数据。包括收集各种分布式应用的数据,生产各种操作的集中反馈,比如报警和报告
- 流式处理
- 比如spark streaming和storm
4.1.下载jar包
链接: https://kafka.apache.org/downloads.html.
4.2.解压到指定的文件夹
解压后进入到解压后文件夹的根目录中
创建两个文件夹,后续使用
4.3.修改配置文件
4.3.1.kafka_2.12-3.2.1\config\zookeeper.propertis
注意:文件分隔符是\\
4.3.2.kafka_2.12-3.2.1\config\server.properties
4.4.启动kafka内置的zookeeper
在根目录下打开cmd或者PowerShell输入命令
.\bin\windows\zookeeper-server-start.bat .\config\zookeeper.properties
成功页面
页面不要关
4.5.启动kafka服务
在根目录下打开cmd或者PowerShell输入命令
.\bin\windows\kafka-server-start.bat .\config\server.properties
成功页面
页面不要关
4.6.创建一个名为 test1 的tiopic的测试主体 kafka
命令如下
.\bin\windows\kafka-topics.bat --create --bootstrap-server localhost:9092 --replication-factor 1 --partitions 3 --topic test3
成功页面
4.7.创建生产消息的生产者
命令如下
.\bin\windows\kafka-console-producer.bat --broker-list localhost:9092 --topic test1
页面如下
页面不要关
4.8.创建消息消费者接收消息
命令如下
.\bin\windows\kafka-console-consumer.bat --bootstrap-server localhost:9092 --topic test1 --from-beginning
页面如下
测试成功!!!
kafka下载与安装教程相关推荐
- Windows系统下nodejs、npm、express的下载和安装教程详解
这篇文章主要介绍了Windows系统下nodejs.npm.express的下载和安装教程详解,非常不错,具有参考借鉴价值,需要的朋友可以参考下 1. node.js下载 首先进入http://nod ...
- Questasim10.6c下载与安装教程
Questasim10.6c下载与安装教程 前言 Questasim作为Modelsim的高级版,使用速度比Modelsim快很多,几乎所有操作指令都是和Modelsim兼容的.今天教大家如何下载并安 ...
- python软件如何安装方法_【新手必看】Python软件下载及安装教程
原标题:[新手必看]Python软件下载及安装教程 Python下载:免费开源 官网地址:https://www.python.org/downloads/ 下载对应版本Python:python-3 ...
- VMware下载与安装教程(详细)
虚拟机VMware下载与安装教程 1. VMware下载 2. VMware的安装 1. VMware下载 Vmware官网 官网节目如下 直接点击 DOWNLOAD FOR FREE 之后会跳转到如 ...
- 舔狗日记-土味情话-每日一言三合一小程序源码下载带安装教程
舔狗日记-土味情话-每日一言三合一小程序源码下载带安装教程 支持扩展更多小程序 1.去微信公众平台申请小程序并填好资料(https://mp.weixin.qq.com) 2.下载微信开发者工具 3. ...
- Eclipse正版(官网下载)安装教程及如何在win7或者win10安装配置jdk1.8
Eclipse正版(官网下载)安装教程及如何在win7或者win10安装配置jdk1.8 阿源是个女程序员啊 1.首先我们先去Eclipse官网下载eclipse安装包,官网地址:http://www ...
- MySQL下载与安装教程(小白)
MySQL下载与安装教程,不需要my.ini文件(小白) 第一步:MySQL下载 第二步:安装过程(8.0.16版本) 第三步:检验是否安装成功 第一步:MySQL下载 (1)oracle官网下载:点 ...
- MySQL的下载与安装教程--超详细
MySQL的下载与安装教程 1.官方下载网址:https://www.mysql.com/downloads/ 2.进入下载页面 下载安装种类分为MSI(安装包)和ZIP两种,如下图: 3.ZIP下载 ...
- Typora下载及安装教程
Typora下载及安装教程 第一步:选择需要的版本,下载压缩包(压缩包已上传至我的资源) 第二步:点击执行程序,进行安装 第三步:选择安装路径,点击下一步 第四步:创建桌面快捷方式 第五步:完成安装 ...
- ArcGIS10.8下载及安装教程(附安装步骤)
谷歌云: https://drive.google.com/drive/folders/10igu7ZSMaR0v0WD7-2W-7ADJGMUFc2ze?usp=sharing ArcGIS10.8 ...
最新文章
- 监护仪系统都是Linux吗,基于Linux和MiniGUI的心电监护仪设计
- Java – 2012年回顾和未来预测
- 手游产品经理初探(三)产品中的玩家行为
- find命令及文件后缀名
- 简单理解操作系统中的PV操作
- 解决:能提交和更新,但SVN查看log时提示找不到路径'svn/XXXX'
- Python使用sftp实现上传和下载功能(实例代码)
- C++VS2019中新建自定义模板与删除自定义模板
- 为什么hashtable中桶的数目都是用质数表示
- 获取客户端用户真实 IP 地址
- NCS初探--基于nRF5340的blinky
- K9G8G08U0A升级到K9GAG08U0D烧录NK要注意的地方
- 《成为乔布斯》读后感
- 父级fixed_父元素设置absolute,子元素设置fixed定位失效
- idea支付宝沙箱环境模拟电脑网站支付demo
- 淘宝客如何通过简书引流?如何成为淘宝客?
- [JS]JavaScript基础学习笔记(黑马pink+尚硅谷李立超)
- ghost-theme-mj主题介绍
- Pytorch之Bert文本分类(一)
- 生成用python画一个正方形的代码