ES集群宕机后处理——重新分配shards，负载均衡

ES集群5台机器，由于同时读写导致其中一台机器宕机，

原本每天的索引shard数设定为10，这样5台机器每台分配2个shard，

但是一旦集群宕机，重启集群后，5号机器宕机导致它上面的shard会转移到其他1-4号机器上。

如果此时往ES里写数据，新索引的10个shard就都会分配到5号机器（因为它上面一个shard都没有，ES集群会优先往资源丰富的机器分配shard），如果此时写入数据，请求会全部集中到5号机器上再次造成节点宕机。

采取的措施是：

先建几个空索引，让ES集群自动负载均衡直至5台机器上各自的shard变得均匀，

然后启往ES里写数据建新索引的任务，这样任务的分片就会均匀分不到5台节点，不会给某台节点造成太大的压力。

最后，新建一个索引，删除一个空索引，直至空索引全部删完。

ES集群宕机后处理——重新分配shards，负载均衡相关推荐

HBase案例 | 20000个分区导致HBase集群宕机事故处理
这是几个月前遇到的一次HBase集群宕机事件,今天重新整理下事故分析报告.概况的说是业务方的一个10节点HBase集群支撑百TB级别的数据量,集群region数量达 23000+,最终集群支持不住业务 ...
linux集群技术（一）--LVS（负载均衡）（一）
集群功能分类负载均衡 LVS概述 LVS工作模式轮训算法 1.集群功能分类 1.1 LB (一)简介 LB:Load Balancing,负载均衡(增加处理能力),有一定高可用能力,但不是高可用 ...
Redis5.0.5集群宕机方案
前言: 集群状态可用时执行添加从节点即可集群状态不可用时(同主从宕机或两主以上同时宕机)需要手动修复解决方案(主要针对集群状态不可用的状态) 方案一:槽重新分配及手动数据迁移 1.修复 ...
Redis6安装配置集群cluster以及集群宕机注意事项
Redis6的cluster模型推荐3主3从先准备3台服务器,每个上面部署2个redis,服务器配置2核2G: 下面在每台服务器安装redis6,每台机器只要安装一次即可,然后分别配置2个端口的co ...
Nacos 集群整合 Nginx 实现反向代理、负载均衡_03
文章目录一.Nginx 配置 1. 下载安装nginx 2. 配置nginx 3. 启动nginx 4. 测试验证 5. 配置域名 4.6. 域名验证一.Nginx 配置 1. 下载安装nginx ...
MyCat分布式数据库集群架构工作笔记0015---高可用_负载均衡_Mycat双主双从读写分离
技术交流QQ群[JAVA,C++,Python,.NET,BigData,AI]:170933152 好的,要配置读写分离,咱们要修改,mycat的配置文件咱们去host97这台主机上去看看配置文件 ...
MyCat分布式数据库集群架构工作笔记0014---高可用_Mycat_负载均衡_双主双从复制配置下
技术交流QQ群[JAVA,C++,Python,.NET,BigData,AI]:170933152 上一节,咱们给两天主机M2,M1都设置了slave用户,M1对应的slave是S1,M2对应的sl ...
除了双机或多机热备，你还该有其他方法解决集群路由机宕机（双机热备）
Nginx+keepalived双机热备(主从模式) 负载均衡技术对于一个网站尤其是大型网站的web服务器集群来说是至关重要的!做好负载均衡架构,可以实现故障转移和高可用环境,避免单点故障,保证网站健 ...
【Elasticsearch】es 集群健康值红色 red 分片未分配
1.概述转载:https://zhuanlan.zhihu.com/p/101608973 转载这篇文章是因为根据我的文章 [Elasticsearch]elasticsearch 7.x 查看分片 ...

ES集群宕机后处理——重新分配shards，负载均衡

ES集群宕机后处理——重新分配shards，负载均衡相关推荐

最新文章

热门文章