一、快速了解Raft算法

Raft 适用于一个管理日志一致性的协议,相比于 Paxos 协议 Raft 更易于理解和去实现它。为了提高理解性,Raft 将一致性算法分为了几个部分,包括领导选取(leader selection)、日志复制(log replication)、安全(safety),并且使用了更强的一致性来减少了必须需要考虑的状态。

相比Paxos,Raft算法理解起来更加直观。

Raft算法将Server划分为3种状态,或者也可以称作角色:

  • Leader
    负责Client交互和log复制,同一时刻系统中最多存在1个。
  • Follower
    被动响应请求RPC,从不主动发起请求RPC。
  • Candidate

一种临时的角色,只存在于leader的选举阶段,某个节点想要变成leader,那么就发起投票请求,同时自己变成candidate。如果选举成功,则变为candidate,否则退回为follower

状态或者说角色的流转如下:

在Raft中,问题分解为:领导选取、日志复制、安全和成员变化。

复制状态机通过复制日志来实现:

日志:每台机器保存一份日志,日志来自于客户端的请求,包含一系列的命令状态机:状态机会按顺序执行这些命令一致性模型:分布式环境下,保证多机的日志是一致的,这样回放到状态机中的状态是一致的

Raft算法选主流程

Raft中有Term的概念,Term类比中国历史上的朝代更替,Raft 算法将时间划分成为任意不同长度的任期(term)。

选举流程

1、follower增加当前的term,转变为candidate。2、candidate投票给自己,并发送RequestVote RPC给集群中的其他服务器。3、收到RequestVote的服务器,在同一term中只会按照先到先得投票给至多一个candidate。且只会投票给log至少和自身一样新的candidate。

关于Raft更详细的描述,可以查看这里,从分布式一致性到共识机制(二)Raft算法

二、Nacos中的CP一致性

Spring Cloud Alibaba Nacos 在 1.0.0 正式支持 AP 和 CP 两种一致性协议,其中的CP一致性协议实现,是基于简化的 Raft 的 CP 一致性。

如何实现Raft算法

Nacos server在启动时,会通过RunningConfig.onApplicationEvent()方法调用RaftCore.init()方法。

启动选举

public static void init() throws Exception {Loggers.RAFT.info("initializing Raft sub-system");// 启动Notifier,轮询Datums,通知RaftListenerexecutor.submit(notifier);// 获取Raft集群节点,更新到PeerSet中peers.add(NamingProxy.getServers());long start = System.currentTimeMillis();// 从磁盘加载Datum和term数据进行数据恢复RaftStore.load();Loggers.RAFT.info("cache loaded, peer count: {}, datum count: {}, current term: {}",peers.size(), datums.size(), peers.getTerm());while (true) {if (notifier.tasks.size() <= 0) {break;}Thread.sleep(1000L);System.out.println(notifier.tasks.size());}Loggers.RAFT.info("finish to load data from disk, cost: {} ms.", (System.currentTimeMillis() - start));GlobalExecutor.register(new MasterElection()); // Leader选举GlobalExecutor.register1(new HeartBeat()); // Raft心跳GlobalExecutor.register(new AddressServerUpdater(), GlobalExecutor.ADDRESS_SERVER_UPDATE_INTERVAL_MS);if (peers.size() > 0) {if (lock.tryLock(INIT_LOCK_TIME_SECONDS, TimeUnit.SECONDS)) {initialized = true;lock.unlock();}} else {throw new Exception("peers is empty.");}Loggers.RAFT.info("timer started: leader timeout ms: {}, heart-beat timeout ms: {}",GlobalExecutor.LEADER_TIMEOUT_MS, GlobalExecutor.HEARTBEAT_INTERVAL_MS);
}

在init方法主要做了如下几件事:

  1. 获取Raft集群节点 peers.add(NamingProxy.getServers());
  1. Raft集群数据恢复 RaftStore.load();
  1. Raft选举 GlobalExecutor.register(new MasterElection());
  1. Raft心跳 GlobalExecutor.register(new HeartBeat());
  1. Raft发布内容
  1. Raft保证内容一致性

选举流程

其中,raft集群内部节点间是通过暴露的Restful接口,代码在 RaftController 中。RaftController控制器是raft集群内部节点间通信使用的,具体的信息如下

POST HTTP://{ip:port}/v1/ns/raft/vote : 进行投票请求POST HTTP://{ip:port}/v1/ns/raft/beat : Leader向Follower发送心跳信息GET HTTP://{ip:port}/v1/ns/raft/peer : 获取该节点的RaftPeer信息PUT HTTP://{ip:port}/v1/ns/raft/datum/reload : 重新加载某日志信息POST HTTP://{ip:port}/v1/ns/raft/datum : Leader接收传来的数据并存入DELETE HTTP://{ip:port}/v1/ns/raft/datum : Leader接收传来的数据删除操作GET HTTP://{ip:port}/v1/ns/raft/datum : 获取该节点存储的数据信息GET HTTP://{ip:port}/v1/ns/raft/state : 获取该节点的状态信息{UP or DOWN}POST HTTP://{ip:port}/v1/ns/raft/datum/commit : Follower节点接收Leader传来得到数据存入操作DELETE HTTP://{ip:port}/v1/ns/raft/datum : Follower节点接收Leader传来的数据删除操作GET HTTP://{ip:port}/v1/ns/raft/leader : 获取当前集群的Leader节点信息GET HTTP://{ip:port}/v1/ns/raft/listeners : 获取当前Raft集群的所有事件监听者
RaftPeerSet

心跳机制

Raft中使用心跳机制来触发leader选举。心跳定时任务是在GlobalExecutor 中,通过 GlobalExecutor.register(new HeartBeat())注册心跳定时任务,具体操作包括:

  • 重置Leader节点的heart timeout、election timeout;
  • sendBeat()发送心跳包
 public class HeartBeat implements Runnable {@Overridepublic void run() {try {if (!peers.isReady()) {return;}RaftPeer local = peers.local();local.heartbeatDueMs -= GlobalExecutor.TICK_PERIOD_MS;if (local.heartbeatDueMs > 0) {return;}local.resetHeartbeatDue();sendBeat();} catch (Exception e) {Loggers.RAFT.warn("[RAFT] error while sending beat {}", e);}}
}

简单说明了下Nacos中的Raft一致性实现,更详细的流程,可以下载源码,查看 RaftCore 进行了解。源码可以通过以下地址检出:

git clone https://github.com/alibaba/nacos.git

扫码关注公众号:架构进化论,获得第一手的技术资讯和原创文章

cp分解实现_对标Eureka的AP一致性,Nacos如何实现Raft算法相关推荐

  1. cp分解实现_如何用贝叶斯高斯张量分解修复缺失数据?(Jupyter notebook - Python)

    本文来源于BGCP Imputation - transdim,主要讨论如何利用贝叶斯高斯张量分解(Bayesian Gaussian CP decomposition, BGCP) 估计矩阵中的缺失 ...

  2. Nacos 实现 AP+CP原理[Raft 算法 ]

    一.什么是 Raft算法 Raft 适用于一个管理日志一致性的协议,相比于 Paxos 协议 Raft 更易于理解和去实现它.为了提高理解性,Raft 将一致性算法分为了几个部分,包括领导选取(lea ...

  3. 『矩阵论笔记』张量CP分解的详细数学推导以及Python实现

    张量CP分解的详细数学推导以及Python实现! 文章目录 一. 张量的基本概念 1.1 张量定义以及张量空间 1.2 阶和纤维(fiber)及切片 1.3 内积和范数及秩一张量/可合张量 1.4 超 ...

  4. 【张量分解(二)】CP分解

    本文是对论文Tensor Decompositions and Applications进行了翻译.整理.筛选和适当的补充,如何希望深入理解可以阅读原文. 相关文章: [张量分解(一)]符号与基础知识 ...

  5. CP分解和HOSVD分解

    一.CP分解(CANDECAMP/PARAFAC) 这是较为古老的一种张量分解方法.最早的研究历史可以追溯到1927年. 在上一节,学习向量乘积的时候,我们看到两个向量外积产生一个矩阵.我们可以推断出 ...

  6. matlab实现CP分解 代码

    使用tensor-box,在matlab中实现cp分解 1.X = sptenrand([5 4 3], 10) //随机生成一个稀疏三维张量5*4* 3,其中有10条数据 X is a sparse ...

  7. 张量分解(二):CP分解

    张量分解系列: 张量分解(一):基础知识 张量分解(二):CP分解 张量分解(三):Tucker分解 张量分解(四):Tensor-train Decomposition 张量分解(五):Tensor ...

  8. 张量分解——CP分解与Tucker分解详解

    关于张量分解一些简单的介绍,可以看我的这篇 张量的CP分解模型 一般而言,给定一个大小为 n 1 × n 2 × n 3 n_1 \times n_2 \times n_3 n

  9. 为什么Eureka是AP,zookeeper是CP

    为什么Eureka是AP,zookeeper是CP 这个问题大多数人的回答是因为ZK如果leader挂了,那么会进行投票选举,而选举的时候ZK是无法提供服务的.对没错,所以我们来详细分析下为什么ZK保 ...

最新文章

  1. keil git 编译文件_keil下的STM32程序开发部署(一)
  2. OpenCV安全屏障摄像机Security Barrier Camera的实例(附完整代码)
  3. 第10讲:高效存储 MongoDB 的用法
  4. SAP Spartacus里解析route参数的逻辑
  5. Animate与transform的使用
  6. cd-rom门锁定什么意思_CD-ROM的完整形式是什么?
  7. c java开发对比_编程语言:Java和C语言的比较,你更偏向于哪个?老程序员:选C...
  8. 【大数据】通过女票的淘宝历程,大白话讲解大数据各个方向的分工
  9. 高清方法生成缩略图函数
  10. 图像处理——在Python中使用OpenCV和PIL显示图像(legacy)
  11. 尝鲜之在Github上搭建Octopress博客
  12. 卷积神经网络对咖啡病虫害识别和分割(分割+分类,病害严重程度详细)
  13. 周志华《机器学习》-所有公式推导集合
  14. 进销存系统设计说明书
  15. 服务可用性的一知半解
  16. vue+element_ui上传文件,并传递额外参数
  17. 洛克菲勒家族是如何发家的,我们都看看
  18. .net framework 3.5 dotNetFx35setup 能不需要网络支持吗?
  19. 电脑不识别u盘的解决方法
  20. 史上最全的Git使用手册

热门文章

  1. 新来的前端小姐姐问:Vue路由history模式刷新页面出现404问题
  2. 华为云携手马栏山文创园助力湖南广电荣获国家广电总局多项大奖
  3. 数仓搬迁:从方法到实践,带你解决数据一致性对比
  4. 快速了解前端开发HTML的正确姿势
  5. 5G边缘计算:开源架起5G MEC生态发展新通路
  6. 【我的物联网成长记13】物联网卡能否携号转网?
  7. html5boder属性,你未必知道的CSS小知识:border属性比你想象的要复杂
  8. Head First设计模式读书笔记七 第八章 模板方法模式
  9. TikZ绘图示例——尺规作图: 椭圆的近似画法
  10. 弹簧触摸开关原理图_电梯弹簧抱闸调整