es配置中防止脑裂的配置

Master和DataNode未分离，导致集群不稳定

在ES集群中，节点分为Master、DataNode、Client等几种角色，任何一个节点都可以同时具备以上所有角色，其中比较重要的角色为Master和DataNode:

Master主要管理集群信息、primary分片和replica分片信息、维护index信息。
DataNode用来存储数据，维护倒排索引，提供数据检索等。

可以看到元信息都在Master上面，如果Master挂掉了，该Master含有的所有Index都无法访问，文档中说，为了保证Master稳定，需要将Master和Node分离。而构建master集群可能会产生一种叫做脑裂的问题，为了防止脑裂，需要设置最小master的节点数为eligible_master_number/2 + 1

脑裂的概念：
如果你有2个Master候选节点，并设置最小Master节点数为1，则当网络抖动或偶然断开时，2个Master都会认为另一个Master挂掉了，他们都被选举为主Master，则此时集群中存在两个主Master，即物理上1个集群变成了逻辑上的2个集群，而当其中一个Master再次挂掉时，即便它恢复后回到了原有的集群，在它作为主Master期间写入的数据都会丢失，因为它上面维护了Index信息。

根据以上理论，我对集群做了如下更改，额外选取3个独立的机器作为Master节点，修改elasticsearch.yml配置

node.master = true
node.data = false
discovery.zen.minimum_master_nodes = 2

修改其他节点配置，将其设置为DataNode，最后挨个重启

node.master = false
node.data = true

es配置中防止脑裂的配置相关推荐

架构师之路 — 部署架构 — 高可用集群 — 主备 HA 系统中的脑裂问题
目录文章目录目录脑裂(Split Brain) 脑裂的原因防止脑裂的办法 Fence 技术 Keepalived vs Pacemaker 参考文档脑裂(Split Brain) 在 HA( ...
HA架构中的脑裂，什么是脑裂，怎样预防脑裂？
在HA架构中有一个非常重要的问题,就是需要保证同一时刻只有一个处于Active状态的NameNode,否则就会出现两个NameNode同时修改命名空间的问题,也就是脑裂(split-brain).脑裂 ...
keepalived中的脑裂
在高可用(HA)系统中,当联系2个节点的"心跳线"断开时,本来为一整体.动作协调的HA系统,就分裂成为2个独立的个体.由于相互失去了联系,都以为是对方出了故障.两个节点上的HA软件 ...
Nginx的配置中与流量分发相关的配置规范：
1.除首页外,其他页面都在某个目录中首页可以直接在根目录下,其他页面都要在根目录下的目录中. 不同的location尽量使用第一个dir的模式进行区分,便于区分该流量是落在nginx本地,还是转发到 ...
spring配置中加载properties文件方法
首先,遇到一个问题,spring配置中加载properties文件配置如下: <context:property-placeholder ignore-unresolvable="tr ...
Elasticsearch之集群脑裂
集群脑裂是什么? 所谓脑裂问题(类似于精神分裂),就是同一个集群中的不同节点,对于集群的状态有了不一样的理解. 由于某些节点的失效,部分节点的网络连接会断开,并形成一个与原集群一样名字的集群,这种情况 ...
高可用集群的脑裂问题
本文来说下集群的脑裂问题文章目录什么是脑裂(split-brain) 集群脑裂产生的原因如何预防HA集群脑裂什么是Fence设备本文小结什么是脑裂(split-brain) 在" ...
脑裂的解决方案与监控
文章目录 1. 概述 2. 脑裂产生的原因 3. 脑裂常见的解决方案 4. 配置zabbix监控脑裂 1. 概述什么是脑裂? 在高可用(HA)系统中,当联系2个节点的"心跳线"断 ...
keepalived MySQL 脑裂_keepalived 脑裂解决思路
(主从模式)脑裂问题上述主从配置方式存在脑裂的可能,即两个节点实际都处于正常工作状态,但是无法接收到彼此的组播通知,这时两个节点均强行绑定虚拟IP,导致不可预料的后果. 这时就需要设置仲裁,即每个节 ...

es配置中防止脑裂的配置

Master和DataNode未分离，导致集群不稳定

es配置中防止脑裂的配置相关推荐

最新文章

热门文章