Kafka配置offsets.retention.minutes和log.retention.minutes的区别
前言
在Kafka中，我们可能会发现两个与retention相关的配置：
- log.retention.minutes
- offsets.retention.minutes
那么它们之前的差别是什么呢？
定义
| 名称 | 描述 | 类型 | 默认值 | 有效值 | 重要性 |
|---|---|---|---|---|---|
| log.retention.minutes |
The number of minutes to keep a log file before deleting it (in minutes), secondary to log.retention.ms property. If not set, the value in log.retention.hours is used 在删除日志文件之前保留日志文件的分钟数（以分钟为单位），优先级弱于 log.retention.ms。 如果未设置，则使用log.retention.hours中的值 |
int | null | 高 | |
| offsets.retention.minutes |
Log retention window in minutes for offsets topic 主题偏移量日志文的保留时长(分钟) |
int | 1440 | [1,...] | 高 |
两者的差别
log.retention.minutes设定的是消息日志的保留时长，而offsets.retention.minutes则是记录topic的偏移量日志的保留时长。
一般来说，记录topic的偏移量日志的保留时长需要设置的比消息日志的保留时长更大。
Kafka配置offsets.retention.minutes和log.retention.minutes的区别相关推荐
- kafka 配置大全（中文，英文）
配置名 默认值 英文描述 中文描述 zookeeper.connect Zookeeper host string Zookeeper主机字符串 advertised.host.name null ...
- Kafka配置消息保存时间的方法
为什么80%的码农都做不了架构师?>>> 配置参考 然后不废话,直接贴最终的关键配置: # 想实现消息队列中保存2小时的消息,那么配置应该像这样: log.roll.hours ...
- Kafka 配置参数汇总及相关说明
Kafka为broker,producer和consumer提供了很多的配置参数. 了解并理解这些配置参数对于我们使用kafka是非常重要的. 本文列出了一些重要的配置参数. 官方的文档 Config ...
- CDH6.3.2之Kafka配置和命令
文章目录 版本查看 命令 创建主题 查看有哪些主题 查看某个主题的描述 生产和消费 压测 1.创建单分区单副本主题 2.写测试 3.读测试 配置 最大Java堆大小 日志数据存储路径 默认副本数 日志 ...
- Kafka 配置指南
文章目录 一.简介 1.1.概述 1.1.1.Apache Kafka是 一个分布式流处理平台. 1.1.2 .Kafka适合什么样的场景? 1.1.3 Kafka的特性 1.1.4 .Topics和 ...
- Kafka配置详解-Consumer配置
转载自:http://orchome.com/535 3.4 kafka消费者配置 在0.9.0.0中,我们引入了新的Java消费者来替代早期基于Scala的简单和高级消费者.新老客户端的配置如下. ...
- kafka集群中常见错误的解决方法：kafka.common.KafkaException: Should not set log end offset on partition
kafka集群中常见错误的解决方法:kafka.common.KafkaException: Should not set log end offset on partition 参考文章: (1)k ...
- Kafka配置SASL_SSL认证传输加密
Kafka配置SASL_SSL认证传输加密 一.SSL证书配置 1.生成证书 如我输入命令如下:依次是 密码-重输密码-名与姓-组织单位-组织名-城市-省份-国家两位代码-密码-重输密码,后面告警不用 ...
- Windos环境下kafka配置启动Zookeeper时,报错：Invalid config, exiting abnormally.
Windos环境下kafka配置启动ZooKeeper时,报错:Invalid config, exiting abnormally. 执行命令: D:\kafkaOnWindows\kafka_2. ...
最新文章
- Tomcat内存溢出解决方案
- BGP水平分割的疑惑
- Online Shopping网上商城数据库设计
- leetcode 739. 每日温度 单调栈解法和暴力法及其优化 c代码
- tf.boolean_mask()的详细用法
- 跟踪调试JDK源码时遇到的问题及解决方法
- WPF多线程UI更新——两种方法
- 【转】RNN、LSTM、Transformer、BERT简介与区别
- Uvaoj10054 - The Necklace
- 如何解释营销能力与技术能力是正交的
- golang 数组、指针数组、数组指针使用总结
- ThinkPHP Bootstrap简约自适应网址导航网站源码
- mysql 触发器 for each row 理解_MySQL触发器中的“ FOR EACH ROW”如何工作？
- mysql 数据库连接 w3school_PHP 连接 MySQL
- Softmax Derivation
- R语言经纬度度分秒转小数点
- [CATARC_2017] 第一周
- 概率论基础 - 5 - 马尔可夫不等式
- android 时钟字体颜色,安卓手机美化之修改状态栏日期时间颜色
- ADIS16488与单片机SPI通信返回0xFFFF的问题解决方法