测试librdkafka
分享一下我老师大神的人工智能教程!零基础,通俗易懂!http://blog.csdn.net/jiangjunshow
也欢迎大家转载本篇文章。分享知识,造福人民,实现我们中华民族伟大复兴!
测试librdkafka
Table of Contents
- 1. 版本匹配问题
- 2. 重新编译0.8版本
- 3. 进入tests目录
- 4. 运行example
1 版本匹配问题
经过尝试,librdkafka 0.9 不向前兼容kafka 0.8.1, 因此,当使用kafka0.8.1 server的时候,需要使用对应的librdkafka版本。
2 重新编译0.8版本
首先切换到librdkafka代码的0.8 branch 然后重新编译代码
make clean./configuremake
3 进入tests目录
运行下面的命令进行测试,可以看到测试全部通过。
[dean@dell_xps_13 tests]$ makegcc -I../src -I../src-cpp -c test.cgcc -I../src -I../src-cpp ../src/librdkafka.a test.o 0003-msgmaxsize.c -o 0003-msgmaxsize.test -L../src -L../src-cpp -lrdkafka -lpthread -lz -lrtgcc -I../src -I../src-cpp ../src/librdkafka.a test.o 0012-produce_consume.c -o 0012-produce_consume.test -L../src -L../src-cpp -lrdkafka -lpthread -lz -lrtgcc -I../src -I../src-cpp ../src/librdkafka.a test.o 0001-multiobj.c -o 0001-multiobj.test -L../src -L../src-cpp -lrdkafka -lpthread -lz -lrtgcc -I../src -I../src-cpp ../src/librdkafka.a test.o 0007-autotopic.c -o 0007-autotopic.test -L../src -L../src-cpp -lrdkafka -lpthread -lz -lrtgcc -I../src -I../src-cpp ../src/librdkafka.a test.o 0010-enforcereqacks.c -o 0010-enforcereqacks.test -L../src -L../src-cpp -lrdkafka -lpthread -lz -lrtgcc -I../src -I../src-cpp ../src/librdkafka.a test.o 0008-reqacks.c -o 0008-reqacks.test -L../src -L../src-cpp -lrdkafka -lpthread -lz -lrtgcc -I../src -I../src-cpp ../src/librdkafka.a test.o 0006-symbols.c -o 0006-symbols.test -L../src -L../src-cpp -lrdkafka -lpthread -lz -lrtgcc -I../src -I../src-cpp ../src/librdkafka.a test.o 0005-order.c -o 0005-order.test -L../src -L../src-cpp -lrdkafka -lpthread -lz -lrtgcc -I../src -I../src-cpp ../src/librdkafka.a test.o 0014-reconsume-191.c -o 0014-reconsume-191.test -L../src -L../src-cpp -lrdkafka -lpthread -lz -lrtgcc -I../src -I../src-cpp ../src/librdkafka.a test.o 0004-conf.c -o 0004-conf.test -L../src -L../src-cpp -lrdkafka -lpthread -lz -lrtgcc -I../src -I../src-cpp ../src/librdkafka.a test.o 0011-produce_batch.c -o 0011-produce_batch.test -L../src -L../src-cpp -lrdkafka -lpthread -lz -lrtgcc -I../src -I../src-cpp ../src/librdkafka.a test.o 0002-unkpart.c -o 0002-unkpart.test -L../src -L../src-cpp -lrdkafka -lpthread -lz -lrtg++ -I../src -I../src-cpp ../src/librdkafka.a test.o 0013-metadata.cpp -o 0013-metadata.test -L../src -L../src-cpp -lrdkafka++ -lrdkafka -lpthread -lz -lrt0013-metadata.cpp:38:0: warning: "_GNU_SOURCE" redefined #define _GNU_SOURCE ^<command-line>:0:0: note: this is the location of the previous definitionfor i in 0003-msgmaxsize.test 0012-produce_consume.test 0001-multiobj.test 0007-autotopic.test 0010-enforcereqacks.test 0008-reqacks.test 0006-symbols.test 0005-order.test 0014-reconsume-191.test 0004-conf.test 0011-produce_batch.test 0002-unkpart.test 0013-metadata.test ; do \ LD_LIBRARY_PATH=../src:../src-cpp ./run-test.sh $i || exit 1 ; \done############## 0003-msgmaxsize.test ################### Running test 0003-msgmaxsize.test in bare mode ###Created kafka instance rdkafka#producer-0Using topic "rdkafkatest_generic"Delivery report for message #0: SuccessDelivery report for message #2: SuccessDelivery report for message #4: SuccessDelivery report for message #6: SuccessDelivery report for message #8: SuccessDestroying kafka instance rdkafka#producer-03 thread(s) in use by librdkafka, waiting...1 thread(s) in use by librdkafka, waiting...0 thread(s) in use by librdkafka###### 0003-msgmaxsize.test in bare mode PASSED! #################### 0012-produce_consume.test ################### Running test 0012-produce_consume.test in bare mode ###Using topic "rdkafkatest_0012"Topic rdkafkatest_0012, testid 4029298770115172415Created kafka instance rdkafka#producer-0Start produce to partition 0Produced 5000 messages to partition 0, waiting for deliveriesStart produce to partition 1Produced 5000 messages to partition 1, waiting for deliveriesDestroying kafka instance rdkafka#producer-0Created kafka instance rdkafka#consumer-1Consuming 5000 messages from partition 0Destroying kafka instance rdkafka#consumer-1Created kafka instance rdkafka#consumer-2Consuming 5000 messages from partition 1Destroying kafka instance rdkafka#consumer-2Created kafka instance rdkafka#consumer-3Consuming 10000 messages from one queue serving 2 partitionsStart consuming partition 0 at offset -5000Start consuming partition 1 at offset -5000Destroying kafka instance rdkafka#consumer-38 thread(s) in use by librdkafka, waiting...0 thread(s) in use by librdkafka###### 0012-produce_consume.test in bare mode PASSED! #################### 0001-multiobj.test ################### Running test 0001-multiobj.test in bare mode ###Creating and destroying 100 kafka instancesUsing topic "rdkafkatest_generic"39 thread(s) in use by librdkafka, waiting...0 thread(s) in use by librdkafka###### 0001-multiobj.test in bare mode PASSED! #################### 0007-autotopic.test ################### Running test 0007-autotopic.test in bare mode ###NOTE! This test requires auto.create.topics.enable=true to be configured on the broker!Created kafka instance rdkafka#producer-0Using topic "rdkafkatest_25fe0dc34f572ffc_autotopic"Delivery report for message #0: SuccessDelivery report for message #1: SuccessDelivery report for message #2: SuccessDelivery report for message #3: SuccessDelivery report for message #4: SuccessDelivery report for message #5: SuccessDelivery report for message #6: SuccessDelivery report for message #7: SuccessDelivery report for message #8: SuccessDelivery report for message #9: SuccessDestroying kafka instance rdkafka#producer-03 thread(s) in use by librdkafka, waiting...1 thread(s) in use by librdkafka, waiting...0 thread(s) in use by librdkafka###### 0007-autotopic.test in bare mode PASSED! #################### 0010-enforcereqacks.test ################### Running test 0010-enforcereqacks.test in bare mode ###Using topic "rdkafkatest_generic"Produced 100 messages, waiting for deliveries, expecting DR status 'Local: ISR count insufficient'Destroying kafka instance rdkafka#producer-0Produced 100 messages, waiting for deliveries, expecting DR status 'Success'Destroying kafka instance rdkafka#producer-14 thread(s) in use by librdkafka, waiting...1 thread(s) in use by librdkafka, waiting...0 thread(s) in use by librdkafka###### 0010-enforcereqacks.test in bare mode PASSED! #################### 0008-reqacks.test ################### Running test 0008-reqacks.test in bare mode ###NOTE! This test requires at least 3 brokers!NOTE! This test requires default.replication.factor=3 to be configured on all brokers!Using topic "rdkafkatest_generic"Created kafka instance rdkafka#producer-0 with required acks -1Produced 100 messages, waiting for deliveriesDestroying kafka instance rdkafka#producer-0Created kafka instance rdkafka#producer-1 with required acks 0Produced 100 messages, waiting for deliveriesDestroying kafka instance rdkafka#producer-1Created kafka instance rdkafka#producer-2 with required acks 1Produced 100 messages, waiting for deliveriesDestroying kafka instance rdkafka#producer-25 thread(s) in use by librdkafka, waiting...0 thread(s) in use by librdkafka###### 0008-reqacks.test in bare mode PASSED! #################### 0006-symbols.test ################### Running test 0006-symbols.test in bare mode ######### 0006-symbols.test in bare mode PASSED! #################### 0005-order.test ################### Running test 0005-order.test in bare mode ###Created kafka instance rdkafka#producer-0Using topic "rdkafkatest_generic"Produced 100000 messages, waiting for deliveriesDestroying kafka instance rdkafka#producer-03 thread(s) in use by librdkafka, waiting...1 thread(s) in use by librdkafka, waiting...0 thread(s) in use by librdkafka###### 0005-order.test in bare mode PASSED! #################### 0014-reconsume-191.test ################### Running test 0014-reconsume-191.test in bare mode ###Using topic "rdkafkatest_21c2d3e15f82e64c_0014"Topic rdkafkatest_21c2d3e15f82e64c_0014, testid 8544126830059343550Created kafka instance rdkafka#producer-0Destroying kafka instance rdkafka#producer-0Created kafka instance rdkafka#consumer-1Iteration #0: Consuming from partition 0Iteration #0: consumed 10000 messagesIteration #1: Consuming from partition 0EOF at offset 10000Iteration #1: consumed 0 messagesDestroying kafka instance rdkafka#consumer-14 thread(s) in use by librdkafka, waiting...0 thread(s) in use by librdkafka###### 0014-reconsume-191.test in bare mode PASSED! #################### 0004-conf.test ################### Running test 0004-conf.test in bare mode ###Using topic "rdkafkatest_generic"%7|1462002036.970|TOPIC|my id#producer-0| New local topic: rdkafkatest_generic%7|1462002036.970|TOPIC|my id#producer-1| New local topic: rdkafkatest_generic1 thread(s) in use by librdkafka, waiting...0 thread(s) in use by librdkafka###### 0004-conf.test in bare mode PASSED! #################### 0011-produce_batch.test ################### Running test 0011-produce_batch.test in bare mode ###Created kafka instance rdkafka#producer-0Using topic "rdkafkatest_generic"Single partition: Produced 100000 messages, waiting for deliveriesDestroying kafka instance rdkafka#producer-03 thread(s) in use by librdkafka, waiting...1 thread(s) in use by librdkafka, waiting...0 thread(s) in use by librdkafkaCreated kafka instance rdkafka#producer-1Using topic "rdkafkatest_generic"Partitioner: Produced 100000 messages, waiting for deliveriesDestroying kafka instance rdkafka#producer-13 thread(s) in use by librdkafka, waiting...1 thread(s) in use by librdkafka, waiting...0 thread(s) in use by librdkafka###### 0011-produce_batch.test in bare mode PASSED! #################### 0002-unkpart.test ################### Running test 0002-unkpart.test in bare mode ###Created kafka instance rdkafka#producer-0Using topic "rdkafkatest_generic"Failed to produce message #0: unknown partition: good!Failed to produce message #1: unknown partition: good!Failed to produce message #2: unknown partition: good!Failed to produce message #3: unknown partition: good!Failed to produce message #4: unknown partition: good!Failed to produce message #5: unknown partition: good!Failed to produce message #6: unknown partition: good!Failed to produce message #7: unknown partition: good!Failed to produce message #8: unknown partition: good!Failed to produce message #9: unknown partition: good!Destroying kafka instance rdkafka#producer-03 thread(s) in use by librdkafka, waiting...0 thread(s) in use by librdkafka###### 0002-unkpart.test in bare mode PASSED! #################### 0013-metadata.test ################### Running test 0013-metadata.test in bare mode ###Using topic "rdkafkatest_481ff4e37b4bbab8_0013"Topic rdkafkatest_481ff4e37b4bbab8_0013.3 thread(s) in use by librdkafka, waiting...0 thread(s) in use by librdkafka###### 0013-metadata.test in bare mode PASSED! ######[dean@dell_xps_13 tests]$
4 运行example
前面已经在test topic中写入了消息,这里需要读取出来 -p 0 指的是partition 0
[dean@dell_xps_13 examples]$ ./rdkafka_example_cpp -C -t test -p 0% Created consumer rdkafka#consumer-0Read msg at offset 0hello, world
也可以对多个broker读取信息,并且采用ccb的方式,ccb指的是consumber call back,据说这个性能更高。
./rdkafka_example_cpp -C -t test -p 0 -b localhost:9093,localhost:9094,localhost:9095 -f ccb
给我老师的人工智能教程打call!http://blog.csdn.net/jiangjunshow
你好! 这是你第一次使用 **Markdown编辑器** 所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章,了解一下Markdown的基本语法知识。
新的改变
我们对Markdown编辑器进行了一些功能拓展与语法支持,除了标准的Markdown编辑器功能,我们增加了如下几点新功能,帮助你用它写博客:
- 全新的界面设计 ,将会带来全新的写作体验;
- 在创作中心设置你喜爱的代码高亮样式,Markdown 将代码片显示选择的高亮样式 进行展示;
- 增加了 图片拖拽 功能,你可以将本地的图片直接拖拽到编辑区域直接展示;
- 全新的 KaTeX数学公式 语法;
- 增加了支持甘特图的mermaid语法1 功能;
- 增加了 多屏幕编辑 Markdown文章功能;
- 增加了 焦点写作模式、预览模式、简洁写作模式、左右区域同步滚轮设置 等功能,功能按钮位于编辑区域与预览区域中间;
- 增加了 检查列表 功能。
功能快捷键
撤销:Ctrl/Command + Z
重做:Ctrl/Command + Y
加粗:Ctrl/Command + B
斜体:Ctrl/Command + I
标题:Ctrl/Command + Shift + H
无序列表:Ctrl/Command + Shift + U
有序列表:Ctrl/Command + Shift + O
检查列表:Ctrl/Command + Shift + C
插入代码:Ctrl/Command + Shift + K
插入链接:Ctrl/Command + Shift + L
插入图片:Ctrl/Command + Shift + G
合理的创建标题,有助于目录的生成
直接输入1次#,并按下space后,将生成1级标题。
输入2次#,并按下space后,将生成2级标题。
以此类推,我们支持6级标题。有助于使用TOC
语法后生成一个完美的目录。
如何改变文本的样式
强调文本 强调文本
加粗文本 加粗文本
标记文本
删除文本
引用文本
H2O is是液体。
210 运算结果是 1024.
插入链接与图片
链接: link.
图片:
带尺寸的图片:
当然,我们为了让用户更加便捷,我们增加了图片拖拽功能。
如何插入一段漂亮的代码片
去博客设置页面,选择一款你喜欢的代码片高亮样式,下面展示同样高亮的 代码片
.
// An highlighted block var foo = 'bar';
生成一个适合你的列表
- 项目
- 项目
- 项目
- 项目
- 项目1
- 项目2
- 项目3
- 计划任务
- 完成任务
创建一个表格
一个简单的表格是这么创建的:
项目 | Value |
---|---|
电脑 | $1600 |
手机 | $12 |
导管 | $1 |
设定内容居中、居左、居右
使用:---------:
居中
使用:----------
居左
使用----------:
居右
第一列 | 第二列 | 第三列 |
---|---|---|
第一列文本居中 | 第二列文本居右 | 第三列文本居左 |
SmartyPants
SmartyPants将ASCII标点字符转换为“智能”印刷标点HTML实体。例如:
TYPE | ASCII | HTML |
---|---|---|
Single backticks |
'Isn't this fun?'
|
‘Isn’t this fun?’ |
Quotes |
"Isn't this fun?"
|
“Isn’t this fun?” |
Dashes |
-- is en-dash, --- is em-dash
|
– is en-dash, — is em-dash |
创建一个自定义列表
- Markdown
- Text-to-HTML conversion tool
- Authors
- John
- Luke
如何创建一个注脚
一个具有注脚的文本。2
注释也是必不可少的
Markdown将文本转换为 HTML。
KaTeX数学公式
您可以使用渲染LaTeX数学表达式 KaTeX:
Gamma公式展示 Γ(n)=(n−1)!∀n∈N\Gamma(n) = (n-1)!\quad\forall n\in\mathbb NΓ(n)=(n−1)!∀n∈N 是通过欧拉积分
Γ(z)=∫0∞tz−1e−tdt .\Gamma(z) = \int_0^\infty t^{z-1}e^{-t}dt\,. Γ(z)=∫0∞tz−1e−tdt.
你可以找到更多关于的信息 LaTeX 数学表达式here.
新的甘特图功能,丰富你的文章
ganttdateFormat YYYY-MM-DDtitle Adding GANTT diagram functionality to mermaidsection 现有任务已完成 :done, des1, 2014-01-06,2014-01-08进行中 :active, des2, 2014-01-09, 3d计划一 : des3, after des2, 5d计划二 : des4, after des3, 5d
- 关于 甘特图 语法,参考 这儿,
UML 图表
可以使用UML图表进行渲染。 Mermaid. 例如下面产生的一个序列图::
这将产生一个流程图。:
- 关于 Mermaid 语法,参考 这儿,
FLowchart流程图
我们依旧会支持flowchart的流程图:
- 关于 Flowchart流程图 语法,参考 这儿.
导出与导入
导出
如果你想尝试使用此编辑器, 你可以在此篇文章任意编辑。当你完成了一篇文章的写作, 在上方工具栏找到 文章导出 ,生成一个.md文件或者.html文件进行本地保存。
导入
如果你想加载一篇你写过的.md文件或者.html文件,在上方工具栏可以选择导入功能进行对应扩展名的文件导入,
继续你的创作。
mermaid语法说明 ↩︎
注脚的解释 ↩︎
测试librdkafka相关推荐
- PHP下kafka的实践(已经测试)
kafka 简介 Kafka 是一种高吞吐量的分布式发布订阅消息系统 kafka角色必知 producer:生产者. consumer:消费者. topic: 消息以topic为类别记录,Kafka将 ...
- librdkafka介绍文档
ntroduction to librdkafka - the Apache Kafka C/C++ client library librdkafka 是一个C实现的高性能 Apache Kafka ...
- kafka的c/c++高性能客户端librdkafka简介/使用librdkafka的C++接口实现简单的生产者和消费者
Librdkafka是c语言实现的apachekafka的高性能客户端,为生产和使用kafka提供高效可靠的客户端,并且提供了c++接口 性能: Librdkafka 是一款专为现代硬件使用而设计的高 ...
- 基于 librdkafka C API 的三种seek随机访问方法
尽管Kafka一般意义上都是建议顺序的消费数据,但难免会遇到回滚.重新处理等需求.甚至有些应用希望把kafka当做一个缓存来用,比如保留1天内的近时的数据记录,并支持各个消费者通过拖拽进度条的方式来查 ...
- locust入门:单机使用locust运行压力测试
locust的官方文档在这里: http://docs.locust.io/en/stable/ 前置:locust的测试脚本使用为python(若未安装python环境,可以搜索安装python) ...
- HA: InfinityStones靶机渗透测试
文章目录 靶机信息 一.信息收集 1.主机发现 2.端口扫描 3.目录扫描 二.漏洞挖掘 1.访问 192.168.1.108 2.访问 /img 目录 3.访问 https 服务(443)端口 4. ...
- HA: Forensics靶机渗透测试
文章目录 靶机说明: 一.信息收集 1.主机发现 2.端口扫描 二.漏洞挖掘 1.访问靶机 web 服务 2.使用 dirb 进行目录扫描 3.使用 exiftool 提取数据 4.使用 dirb 扫 ...
- YOLOv4 资源环境配置和测试样例效果
YOLOv4 资源环境配置和测试样例效果 基本环境:cuda=10.0,cudnn>=7.0, opencv>=2.4 一.下载yolov4 git clone https://githu ...
- 大数据调度平台Airflow(八):Airflow分布式集群搭建及测试
目录 Airflow分布式集群搭建及测试 一.节点规划 二.airflow集群搭建步骤 1.在所有节点安装python3.7 2.在所有节点上安装airflow 三.初始化Airflow 1.每台节点 ...
- 2021年大数据ELK(九):使用VSCode测试分词器
全网最详细的大数据ELK文章系列,强烈建议收藏加关注! 新文章都已经列出历史文章目录,帮助大家回顾前面的知识重点. 目录 使用VSCode测试分词器 一.准备VSCode开发环境 1.打开VSCode ...
最新文章
- 《数学之美》第6章 信息的度量和作用
- 【Keras学习】常见问题与解答
- Linux HOOK
- python认识if语句_python初认识、基础数据类型以及 if 流程控制
- React中父子组件之间的通信
- 快速幂运算 《挑战程序设计竞赛》
- 微信新表情戒烟了!腾讯:雪茄大佬成了歪嘴战神
- solr 英文模拟mysql like查询xml_Solr实现类似MySQL的LIKE查询功能
- EasyBCD 2.4 个人版下载
- 4.8 定位一组元素
- php put怎么接收文件,php,restful_PHP PUT方式传文件的话,如何获取文件内容呢 ?,php,restful,http - phpStudy...
- Numpy根据某一列进行排序
- java array 元素的位置_介绍java中的两种排序工具Arrays和Collections
- 工大瑞普 NP-OSPF综合实验
- mysql当周过生日的人_已知出生年月日,如何查询出本周过生日的人员?
- tibco rv java实例_Tibco介绍及应用.pptx
- badboy设置中文_badboy中文手册
- c语言考场排座系统,具才考场座次编排系统
- Nginx优化与防盗链
- 因为文件共享不安全,所以你不能连接到文件共享。此共享需要过时的SMB1协议
热门文章
- C# 连接本地数据库
- 在学习时,遇到in module ssbuild. File is included in 4 contexts
- 根据JAVA实体生成SQL建表语句
- 计网学习记录,burp抓包等学习记录
- 声纹识别应用:除了人脸识别,声纹识别技术也能帮警察抓逃犯!
- 解决win10系统flash player无法播放,升级
- DSkin的DSkinDataGridView控件滚动条拖动后位置不变
- android soundpool 封装,Android 音效 SoundPool 封装类 停止音效播放
- java经典错误语句_【Java】Java代码经典错误清单
- flash 在谷歌 不能使用