前言

上篇文章讲解了 Kafka 的基础概念和架构,了解了基本概念之后,必须得实践一波了,所谓“实践才是检验真理的唯一办法”,后续系列关于 Kafka 的文章都以 kafka_2.11-0.9.0.0 为例;另外为了让大家快速入门,本文只提供单机版的安装实战教程,如果有想尝试集群方案的,后面在出一篇集群安装的教程,废话不多说了,直接开干。

安装

1. 下载

版本号:kafka_2.11-0.9.0.0

下载地址:http://kafka.apache.org/downloads

2. 安装

# 安装目录
$ pwd
/Users/my/software/study# 减压
$ sudo tar -zxvf kafka_2.11-0.9.0.0.tgz# 重命名
$ sudo mv kafka_2.11-0.9.0.0.tgz kafka-0.9# 查看目录结构
$ cd kafka-0.9 && ls
LICENSE   NOTICE    bin       config    libs      site-docs# 目录结构介绍:
# bin:          存放kafka 客户端和服务端的执行脚本
# config:       存放kafka的一些配置文件
# libs:         存放kafka运行的的jar包
# site-docs:    存放kafka的配置文档说明# 配置环境变量,方便在任意目录下运行kafka命令
# 博主使用的Mac,所以配置在了 ~/.bash_profile文件中,
# Linux中则配置在 ~/.bashrc 或者  ~/.zshrc文件中
$ vim ~/.bash_profileexport KAFKA_HOME=/Users/haikuan1/software/study/kafka-0.9
export PATH=$PATH:$JAVA_HOME:$KAFKA_HOME/bin# 使得环境变量生效
$ source ~/.bash_profile

3.运行

3.1 启动 zookeeper

# 启动zookeeper,因为kafka的元数据需要保存到zookeeper中
$ bin/zookeeper-server-start.sh config/zookeeper.properties# 若出现如下信息,则证明zookeeper启动成功了
[2020-04-25 16:23:44,493] INFO Server environment:user.dir=/Users/haikuan1/software/study/kafka-0.10 (org.apache.zookeeper.server.ZooKeeperServer)
[2020-04-25 16:23:44,505] INFO tickTime set to 3000 (org.apache.zookeeper.server.ZooKeeperServer)
[2020-04-25 16:23:44,505] INFO minSessionTimeout set to -1 (org.apache.zookeeper.server.ZooKeeperServer)
[2020-04-25 16:23:44,505] INFO maxSessionTimeout set to -1 (org.apache.zookeeper.server.ZooKeeperServer)
[2020-04-25 16:23:44,548] INFO binding to port 0.0.0.0/0.0.0.0:2181 (org.apache.zookeeper.server.NIOServerCnxnFactory)

3.2 启动 Kafka server

# 以守护进程的方式启动kafka服务端,去掉 -daemon 参数则关闭当前窗口服务端自动退出
$ bin/kafka-server-start.sh -daemon config/server.properties

3.3 kafka 基础命令使用

# 1. 创建一个topic
# --replication-factor:指定副本个数
# --partition:指定partition个数
# --topic:指定topic的名字
$ bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partition 1 --topic mytopic# 2. 查看创建成功的topic
$ kafka-topics.sh --list --zookeeper localhost:2181# 3. 创建生产者和消费者# 3.1 启动kafka消费端
# --from-beginning:从头开始消费,该特性也表明kafka消息具有持久性
$ bin/kafka-console-consumer.sh --zookeeper localhost:2181 --topic mytopic --from-beginning# 3.2 启动kafka生产端
# --broker-list:当前的Broker列表,即提供服务的列表
$ bin/kafka-console-producer.sh --broker-list localhost:9092 --topic mytopic

4.使用 Java 连接 kafka 进行测试

4.1 创建一个 maven 工程,引入如下 pom 依赖

<dependency><groupId>org.apache.kafka</groupId><artifactId>kafka-clients</artifactId><version>0.9.0.0</version>
</dependency><dependency><groupId>org.apache.kafka</groupId><artifactId>kafka_2.11</artifactId><version>0.9.0.0</version>
</dependency>

4.2 消费者端代码

4.3 生产者端代码

4.4 消费者端效果图

5.总结

本文介绍了 kafka 单机版安装及简单命令使用,然后使用 Java 实现了生产者和消费者的简单功能,虽然内容可能比较简单,但还是强烈建议大家手动去实践一下,从而对 kafka 的架构有一个更深入的理解。下篇文章我们来介绍一下 Kafka 常用参数及其背后的原理,敬请期待。

系列文章尽在微信公众号【z小赵】,关注作者,系列文章不迷路。

kafka topic 目录存放在哪_Kafka系列文章之安装测试-第2篇相关推荐

  1. kafka jar包_Kafka系列文章之安装测试-第2篇

    ​前言 上篇文章讲解了 Kafka 的基础概念和架构,了解了基本概念之后,必须得实践一波了,所谓"实践才是检验真理的唯一办法",后续系列关于 Kafka 的文章都以 kafka_2 ...

  2. 基于阿里云服务器环境搭建到项目上线系列文章之三——安装git

    基于阿里云服务器环境搭建到项目上线系列 前言:最近购买了域名和一台阿里云服务器准备做点东西放上去,所以准备把环境搭建到项目上线的过程记录下来,计划一个系列6篇文章 基于阿里云服务器环境搭建到项目上线系 ...

  3. 基于阿里云服务器环境搭建到项目上线系列文章之四——安装composer

    基于阿里云服务器环境搭建到项目上线系列 前言:最近购买了域名和一台阿里云服务器准备做点东西放上去,所以准备把环境搭建到项目上线的过程记录下来,计划一个系列6篇文章 基于阿里云服务器环境搭建到项目上线系 ...

  4. Kettle系列文章二(安装配置Kettle+SqlServer+简单的输入输出作业)

    一.下载 Kettle下载地址:https://community.hitachivantara.com/docs/DOC-1009855 下拉到DownLoad,点击红框中的链接进行下载.. 二.解 ...

  5. Autodesk系列软件的安装通病

    小白如何解决AUTODESK系列产品的安装问题 其一:关于3Dmax的安装问题 文章目录 小白如何解决AUTODESK系列产品的安装问题 前言 一.怎么分析安装日志? 如何解决这些组件的安装问题? 常 ...

  6. PHP 使用 hprose RPC 服务 系列文章之二——Codeigniter3中使用Hprose

    PHP 使用 hprose RPC 服务 系列文章之一--安装扩展 PHP 使用 hprose RPC 服务 系列文章之二--Codeigniter3中使用Hprose PHP 使用 hprose R ...

  7. Oracle APEX 系列文章14:Oracle APEX 18.1 Docker 镜像

    本文是钢哥的 Oracle APEX 系列文章的第14篇,完整文章目录如下: - Oracle APEX 系列文章01:Oracle APEX, 让你秒变全栈开发的黑科技 - Oracle APEX ...

  8. Oracle APEX 系列文章8:如何从 APEX 5.1.4 升级到最新的 APEX 18.1

    本文是钢哥的 Oracle APEX 系列文章的第8篇,完整文章目录如下: - Oracle APEX 系列文章1:Oracle APEX, 让你秒变全栈开发的黑科技 - Oracle APEX 系列 ...

  9. Oracle APEX 系列文章15:无人值守一键安装Oracle APEX环境

    本文是钢哥的 Oracle APEX 系列文章的第15篇,完整文章目录如下: Oracle APEX 系列文章01:Oracle APEX, 让你秒变全栈开发的黑科技 Oracle APEX 系列文章 ...

最新文章

  1. 初探目前最火的鸿蒙系统,跑了个 “hello world”!
  2. Linux crontab定时任务示例
  3. 过去15年间,到底是什么真正推动了云计算的革命?
  4. 基础 | numpy ndarray 之内功心法,理解高维操作!
  5. 机器学习实现计算不规则图形面积_【名师课堂】苏教数学五年级上2.11校园绿地面积...
  6. MTK MT2503 11B讲义-01编译
  7. PHP 对接阿里云短信
  8. 一洗大增大膏是真的吗_久久享欲增大膏跟一洗大结合真的有那么神奇吗?
  9. python捕捉warning_Python warnings.warn方法代码示例
  10. 手机打开html没有图片,网页看不到图片怎么办?图片打不开的解决办法
  11. win7 android studio 升级HAXM后无法启动安卓模拟器
  12. JDK19都出来了~是时候梳理清楚JDK的各个版本的特性了【JDK15特性讲解】
  13. asp.net实现识别客户端浏览器或操作系统
  14. ACM-ICPC Jiaozuo Onsite 2018 Resistors in Parallel (思维+java大数+找规律)
  15. 如何使用 Nmcli 通过 Linux 终端连接到 Wi-Fi
  16. 2021SC@SDUSC 开源项目GFPGAN -7-experiments
  17. 用电脑无线投屏到电视屏幕的连接方法
  18. cmos管宽长比,OC, OD门和线与逻辑,传输门,竞争冒险,三态门
  19. 论文翻译:Conv-TasNet: Surpassing Ideal Time–Frequency Magnitude Masking for Speech Separation
  20. java毕业设计彩票在线购买系统Mybatis+系统+数据库+调试部署

热门文章

  1. C 语言 运算符怎么使用,详解C++编程中运算符的使用
  2. c++ udp多线程 例子_[内附完整源码和文档] 基于udp实现tcp功能进行大文件传输
  3. vue修改计算属性的值_「Vue学习记录五」计算属性和侦听器
  4. 投篮c语言程序设计,教师招聘笔试体育之篮球必做20题(一)
  5. php 放大镜,图片放大镜效果实战总结
  6. c语言用栈编写数制转换程序,数制转换-栈的应用(C++实现)
  7. cam350怎么看顶层_厉害的人是怎么分析问题的?(实操干货)
  8. Java并发编程实战————并发技巧小结
  9. Java8————方法引用
  10. postgresql c语言,任意语言访问PostgreSQL:C语言接口