分布式计算的原理

分布式计算就是将计算任务分摊到大量的计算节点上,一 起完成海量的计算任务。而分布式计算的原理和并行计算 类似,就是将一个复杂庞大的计算任务适当划分为一个个 小任务,任务并行执行,只不过分布式计算会将这些任务 分配到不同的计算节点上,每个计算节点只需要完成自己 的计算任务即可,可以有效分担海量的计算任务。而每个 计算节点也可以并行处理自身的任务,更加充分利用机器 的CPU资源。最后再将每个节点的计算结果汇总,得到最 后的计算结果。

分布式计算的理论基础

ACID原则

ACID是数据库事务正常执行的四个原则,分别指原子性一致性独立性持久性

A(Atomicity)—— 原子性 原子性很容易理解,也就是说事务里的所有操作要么全部做完,要么都不做,事务成功的条件是事务里的所有操作都成功,只要有一个操作失 败,整个事务就失败,需要回滚。 例如银行转账,从A账户转100元至B账户,分为两个步骤:①从A账户取 100元;②存入100元至B账户。 这两步要么一起完成,要么一起不完成,如果只完成第一步,第二步失 败,钱会莫名其妙少了100元。

C(Consistency)—— 一致性 一致性也比较容易理解,也就是说数据库要一直处于一致的状态,事务的运行不会改变数据库原本的一致性约束。 例如现有完整性约束a + b = 10,如果一个事务改变了a,那么必须得改变 b,使得事务结束后依然满足a + b = 10,否则事务失败。

I(Isolation)—— 独立性 所谓的独立性是指并发的事务之间不会互相影响,如果一个事务要访问 的数据正在被另外一个事务修改,只要另外一个事务未提交,它所访问 的数据就不受未提交事务的影响。 例如交易是从A账户转100元至B账户,在这个交易还未完成的情况下,如 果此时B查询自己的账户,是看不到新增加的100元的。

D(Durability)—— 持久性 持久性是指一旦事务提交后,它所做的修改将会永久保存在数据库上, 即使出现宕机也不会丢失。 这些原则解决了数据的一致性、系统的可靠性等关键问题,为关系数据 库技术的成熟以及在不同领域的大规模应用创造了必要的条件。

CAP理论

一个分布式系统最多只 能同时满足一致性(Consistency)、可用 性(Availability)和分区容错性(Partition tolerance)这三项中的两项。

一致性
指“All nodes see the same data at the same time”,即更新操作成功并返 回客户端完成后,所有节点在同一时间的数据完全一致。对于一致性,可以分 为从客户端和服务端两个不同的视角来看。

  • 从客户端来看,一致性主要指多并发访问时更新过的数据如何获取的问题。
  • 从服务端来看,则是如何将更新复制分布到整个系统,以保证数据的最终一 致性问题。

可用性

  • 指“Reads and writes always succeed”,即服务一直可用,而且是 在正常的响应时间内。对于一个可用性的分布式系统,每一个非故障的节点 必须对每一个请求作出响应。也就是该系统使用的任何算法必须最终终止
  • 当同时要求分区容错性时,这是一个很强的定义:即使是严重的网络错误, 每个请求也必须终止。好的可用性主要是指系统能够很好地为用户服务,不 出现用户操作失败或者访问超时等用户体验不好的情况。通常情况下可用性 和分布式数据冗余、负载均衡等有着很大的关联。
    分区容错性
  • 指“The system continues to operate despite arbitrary message loss or failure of part of the system”,也就是指分布式系统在遇到某节点或网络 分区故障的时候,仍然能够对外提供满足一致性和可用性的服务。
  • 分区容错性和扩展性紧密相关。在分布式应用中,可能因为一些分布式的原 因导致系统无法正常运转。好的分区容错性要求应用虽然是一个分布式系统, 但看上去却好像是一个可以运转正常的整体。例如现在的分布式系统中有某 一个或者几个机器宕掉了,其他剩下的机器还能够正常运转满足系统需求, 或者是机器之间有网络异常,将分布式系统分隔为独立的几个部分,各个部 分还能维持分布式系统的运作,这样就具有好的分区容错性。
CAP权衡

无法同时满足一致性、可用性和分区容错性这三个特性,那应该如何取舍呢?
(1)CA without P:如果不要求P(不允许分区),则C(强一致性)和A(可用 性)是可以保证的。但其实分区始终会存在,因此CA的系统更多的是允许分区 后各子系统依然保持CA。
(2)CP without A:如果不要求A(可用),相当于每个请求都需要在Server之 间强一致,而P(分区)会导致同步时间无限延长,如此CP也是可以保证的。很 多传统的数据库分布式事务都属于这种模式。
(3)AP without C:要高可用并允许分区,则需放弃一致性。一旦分区发生, 节点之间可能会失去联系,为了高可用,每个节点只能用本地数据提供服务, 而这样会导致全局数据的不一致性。现在众多的NoSQL都属于此类。

分布式——ACID原则 CAP理论相关推荐

  1. cap理论具体含义_分布式事务的CAP理论

    相关历史文章(阅读本文之前,您可能需要先看下之前的系列 ) 分布式事务「2020年」必学,升职加薪你准备好了吗? 事务的基本概念 事务的四大特性ACID 分布式事务产生的场景 前言 通过前面的学习,我 ...

  2. 分布式相关概念:ACID特性,CAP理论,BASE理论

    汇总一下几个常见的理论的概念: 1.ACID特性 数据库管理系统中事务(transaction)的四个特性: 原子性(Atomicity).一致性(Consistency).隔离性(Isolation ...

  3. 分布式架构之CAP理论/AP架构/CP架构

    上一篇梳理一下 CAP定理:https://blog.csdn.net/Soinice/article/details/96782876 著名的CAP理论指出,一个分布式系统不可能同时满足C(一致性) ...

  4. 分布式系统设计之CAP理论

    一.概述 CAP理论是美国加州大学的计算机科学家 Eric Brewer 在1998年提出的,该理论主要指出了分布式系统设计中存在两个质量指标:数据强一致性(Consistent)和服务高可用(Ava ...

  5. 从分布式一致性谈到CAP理论、BASE理论

    问题的提出 在计算机科学领域,分布式一致性是一个相当重要且被广泛探索与论证问题,首先来看三种业务场景. 1.火车站售票 假如说我们的终端用户是一位经常坐火车的旅行家,通常他是去车站的售票处购买车 票, ...

  6. 分布式 CAP 理论

    2019独角兽企业重金招聘Python工程师标准>>> 分布式 CAP 理论 CAP 理论是一个经典的分布式系统理论. CAP 理论指出:一个分布式系统不可能同时满足一致性(Cons ...

  7. etcd 笔记(01)— etcd 简介、特点、应用场景、常用术语、分布式 CAP 理论、分布式原理

    1. etcd 简介 etcd 官网定义: A highly-available key value store for shared configuration and service discov ...

  8. 分布式架构中常见理论以及如何才能设计出高可用的分布式架构?

    分布式架构中常见理论以及如何才能设计出高可用的分布式架构? 一.前言 我们就来聊一聊目前主流的分布式架构以及分布式架构中常见理论以及如何才能设计出高可用的分布式架构好了.分布式架构中,SOA和微服务架 ...

  9. 分布式事务概念、理论、及(2PC、3PC)

    一. 简介 1. 什么是本地事务? 基于关系型数据库的事务,叫做本地事务,也叫做数据库事务. 本地事务通常是应用和数据库在一个服务器上,利用数据库本身的事务特性,从而实现本地事务. 数据库事务的特性: ...

最新文章

  1. python路径拼接os.path.join()函数的用法
  2. 通过对比对象掩码建议的无监督语义分割
  3. 一对一交友源码,一对一视频交友源码,这些功能是主流
  4. 03-缓存一致性---提高性能和引入CoreLink CCI-500
  5. 那些2019年会爆发的泛娱乐黑科技风口——网易MCtalk泛娱乐创新峰会揭秘
  6. 直播预告 | AAAI 2022论文解读:基于锚框排序的目标检测知识蒸馏
  7. 学习笔记_vnpy实战培训day04_作业
  8. java需要下载哪些,全网最新
  9. java int在那个包_int intValue()
  10. ActiveMQ常见操作
  11. 用Python解决简单的水果分类问题(一)
  12. Cortex-M0详解(2)--寄存器
  13. plc用c语言编程的好处,学习PLC编程的重要性
  14. 【matlab】拉普拉斯变换与反变换
  15. MySQL所有常用语法大全
  16. vue-实现换一换功能
  17. GB2312 GBK BIG5
  18. 四阶龙格库塔法的基本思想_利用龙格库塔法求解质点运动方程
  19. 大型国企用泛微OA,让会务管理有序,让会议开展高效
  20. 优雅地使用 C++ 制作表格:tabulate

热门文章

  1. LeetCode 774. 最小化去加油站的最大距离(极小极大化 二分查找)
  2. Feature Engineering 特征工程 3. Feature Generation
  3. 程序员面试金典 - 面试题 02.04. 分割链表
  4. LeetCode 1237. 找出给定方程的正整数解
  5. LeetCode 1260. 二维网格迁移(二维转一维)
  6. listrecord根据某个属性去重_去哪网开发实战记录(9):城市选择页(中)
  7. 前端demo:实现背景半透明,div与文本正常显示
  8. 有两个序列a,b,大小都为n,序列元素的值任意整数,无序;要求:通过交换a,b中的元素,使[序列a元素的和
  9. 珍爱生命,远离大厂政治斗争
  10. 全链路压测平台(Quake)在美团中的实践