分布式是写出来的(五)
数据冗余策略
RS(Reed Solomon Coding)纠删码
在存储系统中,需要采用数据冗余技术来保证数据的可靠性,相比使用多副本复制机外,使用纠删码能够以更小的数据冗余度获得更高的数据可靠性。
RS纠删码将原文件分成n个数据块,同时为这n个数据块生成m个校验块,而能够容忍最多丢失这(N+M)个块中的任意m个数据或者校验块。
但是重点是RS纠删码完成的是保证数据不丢失,但无法保证数据被篡改!这个就引出来一些分布式算法(Raft),暂时是这样理解的。如果有问题后期再更改
数据冗余是指在存储和传输过程中,出了实际需要的数据,还存在额外的数据进行校验。(额外的数据可以是一个备份,也可以是校验完毕的数据)
ECC(Error Checking and Correcting)
ECC内存,即应用了能够实现错误检查和纠正技术(ECC)的内存条。一般多应用在服务器及图形工作站上,这将使整个电脑系统在工作时更趋于安全稳定。ECC是“Error Checking and Correcting”的简写,中文名称是“错误检查和纠正”。
ECC本身并不是一种内存型号,也不是一种内存专用技术,它是一种广泛应用于各种领域的计算机指令中,是一种指令纠错技术。它的英文全称是“Error Checking and Correcting”,对应的中文名称就叫做“错误检查和纠正”,从这个名称我们就可以看出它的主要功能就是“发现并纠正错误”,它比奇偶校正技术更先进的方面主要在于它不仅能发现错误,而且能纠正这些错误,这些错误纠正之后计算机才能正确执行下面的任务,确保服务器的正常运行。
RAID 1
RAID 1通过磁盘数据镜像实现数据冗余,在成对的独立磁盘上产生互 为备份的数据。当原始数据繁忙时,可直接从镜像拷贝中读取数据,因此RAID 1可以提高读取性能。RAID 1是磁盘阵列中单位成本最高的,但提供了很高的数据安全性和可用性。当一个磁盘失效时,系统可以自动切换到镜像磁盘上读写,而不需要重组失效的数据。
拓展阅读
分布式系统的一致性
由于异常的存在,分布式存储系统设计时往往会将数据冗余存储多份,每一份称为一个副本(replica/copy)。这样,当某一个节点出现故障时,可以从其他副本上读到数据。可以这么认为,副本是分布式存储系统容错技术的唯一手段。由于多个副本的存在,如何保证副本之间的一致性是整个分布式系统的理论核心。
分布式存储系统多个副本之间的数据一致性,有强一致性,弱一致性,最终一致性,因果一致性,顺序一致性。
分布式是写出来的(五)相关推荐
- 基于Sql Server 2008的分布式数据库的实践(五)
基于Sql Server 2008的分布式数据库的实践(五) 原文 基于Sql Server 2008的分布式数据库的实践(五) 程序设计 ------------------------------ ...
- 接口文档要写在概要设计里吗_写代码的五个步骤,你会几个?
<5分钟从学生到程序员>第11课. 终于开始要做功能了,我相信新手都会有些兴奋和紧张,我们就带着这种美妙的感觉开始代码之旅.很多新手拿到功能,就开始复制代码,乐其不疲的当个代码搬运工,这种 ...
- 请写出至少五个块级元素_Java 面试题(五)
面向对象的三个特征 封装,继承,多态.这个应该是人人皆知. 多态的好处 允许不同类对象对同一消息做出响应,即同一消息可以根据发送对象的不同而采用多种不同的行为方式(发送消息就是函数调用).主要有以下优 ...
- 请写出至少五个块级元素_以逸之名
第一章 第九元素 或许在很久以前有着那么些许特别的元素类群,人们对它们的拥有者涌溢着无限的敬仰和崇拜.可是,随着时代的发展,相信这世间万物的本质是元素的人以近乎于无.他们热爱的是科学,相信科学的力量. ...
- 小寒也会写程序(五)
也不知听谁说的,"升本考试是超级简单的,考些简单的c语言,数据库,网络,再加上那万恶的英语,两天,三套卷,一次上机,轻轻松松上本科,快快乐乐拿学位."小寒以及小寒的同学全部都信以为 ...
- 用python写一个日语五十音记忆小程序qaq
最近在B站自学日语~可能被英语洗脑太久了,感觉五十音图特别别扭超级难背qaq 朋友推荐了几个背单词软件都没有背五十音的,对零基础不太友好 自己写了一个感觉还挺好使 程序很简单,主要是没有日语输入法,要 ...
- CTF-隐写术(五)
声明:以下CTF题均来自网上收集,在这里主要是给新手们涨涨见识,仅供参考而已.需要题目数据包的请私信或在下方留言. 9.FI ...
- Python3写爬虫(五)爬取糗事百科段子
2019独角兽企业重金招聘Python工程师标准>>> 最近几天开始用Python3改写网上用Python2写的案例,发现完全可以用Python3来重构Python2的源码.本篇文章 ...
- 分布式技术与实战第五课 分布式-消息中间件选型
第26讲:消息队列有哪些应用场景? 分布式系统不同模块之间的通信,除了远程服务调用以外,消息中间件是另外一个重要的手段,在各种互联网系统设计中,消息队列有着广泛的应用.从本课时开始,专栏进入分布式消息 ...
最新文章
- struts2中 ServletActionContext与ActionContext区别
- Linux服务器程序编程的几个坎
- 构造方法与重载:定义一个网络用户类,信息有用户 ID、用户密码、 email 地址。在建立类的实例时把以上三个信息都作为构造函数的参数输入
- Python-数据结构-哈希表
- hadoop+hive+flink+hbase交互的版本兼容性
- thinking-in-java(11) 持有对象
- pcl_openmap_OpenMap教程3 –使用MapHandler构建基本的地图应用程序–第2部分
- 理解vue中if和for指令不能同时使用
- 存数据返回他的序列号id_使用excel进行数据分析
- 分解原理_原理篇 | 推荐系统之矩阵分解模型
- 锐浪报表,用脚本处理字段
- 关于win10笔记本电脑插入耳机后依旧外放的问题(亲测戴尔)
- iOS打包成ipa包
- 改善民生 住有所居(加快经济发展方式转变)
- cd 命令行进入目标文件夹
- Java中的接口详解
- 汽车遥控启动,车辆远程启动,汽车手机控制远程启动,都表示什么意思?如何使用?
- Windows 连接了网络浏览器不能上网
- LibreOffice Calc - 表格内部换行快捷键
- 再度升级:深入分析针对金融科技公司的Evilnum恶意软件及组件