kafka报错打开文件数过多导致kafka关闭
监控到业务异常，kafka异常
查看kafka日志，发现大量错误日志：
ERROR Error while accepting connection (kafka.network.Acceptor)java.io.IOException: 打开的文件过多lsof -p kafka-pid 看有上万个文件句柄
使用自写的删除topic工具，删除一部分历史topic后，重启kafka，问题解决。之后继续删除topic，文件句柄降到2000。
1.运维规范：kafka历史topic定时清理，可配置job
kafka报错打开文件数过多导致kafka关闭相关推荐
- 【Flink】Flink 写入 kafka 报错 Failed to send data to Kafka: Expiring 4 record(s) for 20001 ms has passed
文章目录 1.场景1 1.1 概述 1.2 百度 1.3 同样问题 2.场景再现 本文为博主九师兄(QQ:541711153 欢迎来探讨技术)原创文章,未经允许博主不允许转载. 1.场景1 1.1 概 ...
- 【siddhi】 siddhi kafka报错 SiddhiAppCreationException At stream SweetProductionStream source kafka
1.美图 2.背景 写了一个siddhi与kafka的代码,不太熟悉,代码如下,报错 package com.siddhi.v42x.demo.source.kafka.kafka10;import ...
- spark2+kafka报错:java.lang.NoSuchMethodError:org.apache.kafka.clients.consumer.KafkaConsumer.subscribe
spark读取kafka数据 // Create DataFrame representing the stream of input lines from kafkaval lines = spar ...
- 【Flink】flink Kafka报错 : Failed to send data to Kafka: This server is not the leader for that topic-pa
1.背景 出现这个问题的背景请参考:[Kafka]Failed to send data to Kafka: Expiring 30 record(s) for xxx 732453 ms has p ...
- 【Kafka】Flink kafka 报错 Failed to send data to Kafka: Failed to allocate memory within the config
1.背景 [2020-09-05 14:57:51] [INFO] [org.apache.flink
- kafka 报错：kafka server：Message was too large ，server rejected it to avoid allocation
kafka报错信息: kafka server:Message was too large ,server rejected it to avoid allocation kafka版本: kafk ...
- flume 对接 kafka 报错： Error while fetching metadata with correlation id 35 {=INVALID_TOPIC_EXCEPTION}
flume 对接 kafka 报错:Error while fetching metadata with correlation id 35 : {=INVALID_TOPIC_EXCEPTION} ...
- win10 启动kafka报错 另一个程序正在使用此文件，进程无法访问
welcome to my blog 问题描述: win10启动kafka报错: ERROR Failed to clean up log for __consumer_offsets-39 in d ...
- 【Flink】Flink 写入 kafka 报错 The server disconnected before a response was received
文章目录 1.场景再现 1.1.概述 1.场景再现 1.1.概述 Flink 写入 kafka 报错 The server disconnected before a response was rec ...
最新文章
- linux gcc 安装目录,Linux安装其他版本GCC的方法
- 客户端AJAX验证表单
- python3数据库编程_python3+PyQt5 数据库编程--增删改实例
- linux多进程知识汇总
- 饼图的引导线怎么加_4步学会EXCEL复合条饼图制作方法，让统计结果更直观！
- pythonb超分辨成像_Papers | 超分辨 + 深度学习（未完待续）
- C/C++之win98扫雷外挂基础篇
- python批量下载网页文件夹_Python实现批量从不同的Linux服务器下载文件
- python自定义安装哪些不需要_python setup.py配置，用于在自定义目录中安装文件
- 梅创社c语言课本答案解析,c语言程序设计第2版) 教学课件 作者 梅创社答案 第一章答案.docx...
- 电脑没有摄相头，使用安卓或IOS旧手机替代摄相头
- 模拟电路——集成运算放大器（1）
- 赤壁之战的Google Map
- 从ADK的WinPE自己手动构建自己的PE
- Spring AOP
- 代数合并同类项计算机步骤,代数式(合并同类项)
- 二值图像blob分析
- PHP代码审计DVWA[JavaScript]
- [Python] openpyxl读存大数据 Exception: String longer than 32767 characters
- cs6 mac 破解方法