hbase 重启regionserver报错 Call queue is full on xxxx,16000,1611197476326, too many items queued

今天发现hbase有个regionserver挂了，于是登录cm重启，发现没有起来，然后看日志发现报错了，报错信息如下：

于是百度查询，发现网上好多是修改 hbase.ipc.server.max.callqueue.size 这个参数，其实增加队列大小即可，不用设置这个，我的解决方法是增加 RegionServer 中启动的 RPC 服务器实例数量：
hbase.regionserver.handler.count 默认30个，增加到200个，交替重启。好了，regionserver起来了
知识点：
hbase.regionserver.handler.count
该配置参数用于定义regionserver上用于等待响应用户表级请求的线程数，通常的配置规则是：当每次请求的数据量较大时（如接近MB的单词put，cache较大的scan操作）；当每次请求负载较小时，则把该值配置较大。同时在请求的数据量大小收到参数hbase.ipc.server.max.callqueue.size.限制，典型的配置场景是网站后端的HBase集群，这种场景下大多数为读请求，很少写请求，因此这种场景可以把该值配置到最大也是安全的。
如果单个请求的数据量很大，并且将该值配置的很大时，put并发量很高时，会给内存造成很大压力，甚至有可能触发内存溢出。
可以通过查看rpc.logging（regionserver打开DEBUG日志级别），根据在排队的线程数量消耗的内存大小来判断hbase.regionserver.handler.count配置是否过大或者过小。

hbase 重启regionserver报错 Call queue is full on xxxx,16000,1611197476326, too many items queued相关推荐

dfs.datanode.max.xcievers参数导致hbase集群报错
2013/08/09 转发自http://bkeep.blog.163.com/blog/static/123414290201272644422987/ [案例]dfs.datanode.max.x ...
Centos 7重启网卡报错
1-centos7下重启网卡报错,具体详情如下对于以上类型报错,需要以下几步检查 a.检查NetworkManager是否启动,如果启动了,就使用service NetworkManager sto ...
树莓派重启DHCP报错Warning: The unit file, source configuration file or drop-ins of docker.service changed
问题树莓派重启DHCP报错Warning: The unit file, source configuration file or drop-ins of docker.service change ...
docker配置daemon.json或docker.service后重启docker报错的问题
docker配置daemon.json或docker.service后重启docker报错的问题在更改或创建docker的配置文件时,我们通常都会重启使docker载入这些配置.但有的时候重启会报错 ...
linux nfs引起重启,linux下面重启nfs报错：nfs-server.service:main process exited
linux下面重启nfs报错:nfs-server.service:main process exited [root@dhcp-66-83-39 images]# service rpcbind s ...
Virtual Box 报错，无法为虚拟电脑xxxx创建一个新任务
Virtual Box 报错,无法为虚拟电脑xxxx创建一个新任务具体错误代码: The virtual machine 'Master' has terminated unexpectedly d ...
pod挂载nas启动失败报错：unable to mount volume xxxx Timeout waiting for mount paths to be created
深夜你熟睡时,用户打来电话.大哥我在上线我的应用怎么突然起不来了.快帮我看看,再过一个小时店铺就开门了. 核实pod状态打开电脑登入环境,使用kubectl get pod 查询到用户的pod处于创 ...
idea右侧maven出现多个root根节点，删除报错：You can not remove xxxx because its imported as
idea右侧maven出现多个root根节点,删除报错:You can not remove xxxx because its imported as 问题截图: 出现这种问题后,网上查到的方法很多, ...
HBase Master启动报错java.io.IOException: error or interrupted while splitting logs
今天在一个CDH环境中启动HBase时HBase Master启动发生异常,HBase Master采用的是两台HMaster做一个HA.从CDH管理界面查询启动成功后,HBase Master状态并 ...

hbase 重启regionserver报错 Call queue is full on xxxx,16000,1611197476326, too many items queued

hbase 重启regionserver报错 Call queue is full on xxxx,16000,1611197476326, too many items queued相关推荐

最新文章

热门文章