broker-list与bootstrap-server辨析

2024-06-10 07:03:03

Kafka broker-list,bootstrap-server以及zookeeper的区别
broker-list

zookeeper的默认端口号是2181，kafka的默认端口号是9092

broker-list

broker指的是kafka的服务端，可以是一个服务器也可以是一个集群。producer和consumer都相当于这个服务端的客户端。
broker-list指定集群中的一个或者多个服务器，一般我们再使用console producer的时候，这个参数是必备参数，另外一个必备的参数是topic，kafka的默认端口号是9092.如下示例：

[wt@hadoop02 kafka]$ bin/kafka-console-producer.sh --broker-list hadoop02:9092 --topic myself

bootstrap-servers vs zookeeper

zookeeper是老版本的用法，0.8以前的kafka，消费的进度(offset)是写在zk中的，所以consumer需要知道zk的地址。这个方案有性能问题，0.9 的时候整体大改了一次，brokers 接管了消费进度，consumer 不再需要和 zookeeper 通信了，所以就用bootstrap-server了。

bootstrap-server是新版本的用法，新版的 Kafka 使用一个选举出来的 controller 来监听 zookeeper，其他 node 再去和 controller 通信，这么做的目的是为了减少 zookeeper 的压力。bootstrap-servers 会自动发现其他 broker，这也是 bootstrap 的含义

broker-list与bootstrap-server辨析相关推荐

couldn't register *** with the bootstrap server. Error: unknown error code.
Couldn't register com.gdou.zhy.zhysimpleTable with the bootstrap server. Error: unknown error code. ...
Couldn't register com.zyg.ios.XXX with the bootstrap server. Error: unknown error code.
运行应用突然崩溃,然后再次运行就出现了如下错误: Couldn't register com.zyg.ios.XXX with the bootstrap server. Error: unknown ...
Kafka bootstrap.server is not a recognized option
1. 现象 kafka-console-consumer.sh --bootstrap.server=localhost:9092 --topic=file-connector-example-top ...
Kafka与zk的关系及连接参数bootstrap.server的正确理解
1.我们知道旧版Kafka,用的是zookeeper地址而非bootstrap.servers, 那么新版 kafka 消费者.生产者配置为何使用 bootstrap-servers 而不是 zook ...
Kafka日记（五）RdKafka文档翻译
RdKafka文档翻译出于使用 , 特做简单翻译 ,仅做参考. https://arnaud-lb.github.io/php-rdkafka/phpdoc/book.rdkafka.html 函数 ...
SQL Server 2005自带的Service Broker功能
--Service Broker 简介 Service Broker是使SQL Server成为一个构建可靠的分布式异步应用程序平台. Service Broker并不是一个通用的消息处理系统. Se ...
SQL Server 2005 Service Broker 初探
发布日期 : 11/4/2004| 更新日期 : 11/4/2004 Roger Wolter 适用于: Microsoft SQL Server 2005 Transact SQL (T-SQL) ...
SQL Server 2005 Service Broker 初探 [摘抄]
  发布日期 : 11/4/2004| 更 ...
[转]基于SQL Server 2008 Service Broker构建企业级消息系统
http://www.infoq.com/cn/articles/enterprisemessage-sqlserver-servicebroker 1.引言 Microsoft 在SQL Serve ...
Windows Server 2012 从入门到精通系列之如何提高DC持续性?
Windows Server 2012对硬件的要求 Windows Server 2012在9月4日正式在线发布,让广大用户终于可以购买采用最新服务器操作系统了.但由于正式版刚刚发布,很多用户对最新版 ...

最新文章

热门文章