写缓冲器与无效化

(想自学习编程的小伙伴请搜索圈T社区,更多行业相关资讯更有行业相关免费视频教程。完全免费哦!)

背景:

MESI 协议解决了缓存一致性问题, 但是其自身也存在一个性能弱点——处理器执行写内存操作时,必须等待其他所有处理器将其高速缓存中的相应副本数据删除并接收到这些处理器所回复的 Invalidate Acknowledge/Read Response消息之后才能将数据写入高速缓 存。为了规避和减少这种等待造成的写操作的延迟 (Latency), 硬件设计者引入了写缓冲器和无效化队列,

写缓存器

写缓冲器 (Store Buffer, 也被称为 Write Buffer) 是处理器内部的一个容扯比高速缓 存还小的私有高速存储部件6. 每个处理器都有其写缓冲器, 写缓冲器内部可包含若干条 目 (Entry)。 一个处理器无法读取另外一个处理器上的写缓冲器中的内容。

引入写缓冲器之后,处理器在执行写操作时会做这样的处理:

如果相应的缓存条目状态为E或者M. 那么处理器可能会直接将数据写入相应的缓存行而无须发送任何消息飞 如果相应的缓存条目状态为 s. 那么处理器会先将写操作的相关数据(包括数据和待操作 的内存地址)存人写缓冲器的条目之中,并发送Invalidate消息;如果相应的缓存条目状态为I, 我们就称相应的写操作遇到了写未命中(WriteMiss), 那么此时处理韶会先将写 操作相关数据存人写缓冲器的条目之中,并发送ReadInvalidate消息。

由此可见, 写缓冲器的引入使得处理器在执行写操作的时候可以不等待 Invalidate Acknowledge消息, 从而减少了写操作的延时. 这使得写操作的执行处理器在其他处理器回复Invalidate Acknowledge/Read Response消息这段时间内能够执行其他指令,从而提高了处理器的指令执行效率。

引入无效化队列(Invalidate Queue) 之后, 处理器在接收到Invalidate消息之后并不删除消息中指定地址对应的副本数据, 而是将消息存入无效化队列之后就回复Invalidate Acknowledge消息,从而减少了写操作执行处理器所需的等待时间。有些处理器(比如x86)可能没有使用无效化队列。

写缓冲器和无效化队列的引入又会带来一些新的问题——内存重排序和可见性问题。

存储转发

这种处理器直接从写缓冲器中读取数据来实现内存读操作的技术被称为存储转发(Store Forwarding)。 存储转发使得写操作的执行处理器能够在不影响该处理器执行读操作的情 况下将 写操作的结果存入写缓冲器。

再探内存重排序

​ 写缓冲器和无效化队列都可能导致内存重排序。

-硬件层的内存屏障分为两种:Load BarrierStore Barrier即读屏障和写屏障。
-处理器在一些特定条件下(比如写缓冲器满、I/0指令被执行)会将写缓冲器排空(Drain)或者冲刷(Flush), 即将写缓冲器中的内容写入高速缓存,但是从程序对一个或者一组变扯更新的角度来看,处理器本身并无法保证这种冲刷对程序来说是及时的。

为了保证一个处理器对共享变措所做的更新可以被其他处理器同步,编译器等底层系统需要借助一类被称为内存屏障的特殊指令。内存屏障中的存储屏障(Store
Barrier)可以使执行该指令的处理器冲刷其写缓冲器。

​ 然而,冲刷写缓冲器只是解决了可见性问题的一半。因为可见性问题的另一半是无效化队列导致的。无效化队列的引入本身也会导致新的问题一处理器在执行内存读取操作前如果没有根据无效化队列中的内容将该处理器上的高速缓存中的相关副本数据删除,那么就可能导致该处理器读到的数据是过时的旧数据,从而使得其他处理器所做的更新丢失。

​ 为了使一个处理器上运行的线程能够读取到另外一个处理器上运行的线程对共享变量所做的更新, 该处理器必须先根据无效化队列中存储的Invalidate消息删除其高速缓存中的相应副本数据,从而使其他处理器上运行的线程对共享变拯所做的更新在缓存一 致性协议的作用下能够被同步到该处理器的高速缓存之中。

​ 内存屏障中的加载屏障(Load Barrier)正是用来解决这个问题的。加载屏障会根据无效化队列内容所指定的内存地址, 将相应处理器上的高速缓存中相应的缓存条目的状态都标记为I’ 从而使该处理器后续执行针对相应地址(无效化队列内容中指定的地址)的读内存操作时必须发送Read消息.以将其他处理器对相关共享变量所做的更新同步到该处理器的高速缓存中。

​ 不同的处理器架构所支持(允许)的内存重排序各有不同。比如,现代处理器都会采 用写缓冲器, 而有的处理器(比如x86)会保障写操作的顺序, 即这些处理器不允许StoreStore 重排序的出现。

再探可见性

​ 我们说写缓冲器是可见性问题的硬件根源。

​ 处理器在一些特定条件下(比如写缓冲器满、I/0指令被执行)会将写缓冲器排空(Drain)或者冲刷(Flush), 即将写缓冲器中的内容写入高速缓存 ,但是从程序对一个或者一组变扯更新的角度来看,处理器本身并无法保证这种冲刷对程序来说是及时的。因此,为了保证一个处理器对共享变措所做的更新可以被其他处理器同步,编译器等底层系统需要借助一类被称为内存屏障的特殊指令。内存屏障中的存储屏障(Store Barrier)可以使执行该指令的处理器冲刷其写缓冲器。

​ 然而,冲刷写缓冲器只是解决了可见性问题的一半。因为可见性问题的另一半是无效化队列导致的。无效化队列的引入本身也会导致新的问题一处理器在执行内存读取操作前如果没有根据无效化队列中的内容将该处理器上的高速缓存中的相关副本数据删除,那么就可能导致该处理器读到的数据是过时的旧数据,从而使得其他处理器所做的更新丢失。因此,为了使一个处理器上运行的线程能够读取到另外一个处理器上运行的线程对共享变量所做的更新, 该处理器必须先根据无效化队列中存储的Invalidate消息删除其高速缓存中的相应副本数据,从而使其他处理器上运行的线程对共享变拯所做的更新在缓存一 致性协议的作用下能够被同步到该处理器的高速缓存之中。

​ 内存屏障中的加栽屏障(Load Barrier)正是用来解决这个问题的。加载屏障会根据无效化队列内容所指定的内存地址, 将相应处理器上的高速缓存中相应的缓存条目的状态都标记为I’ 从而使该处理器后续执行针对相应地址(无效化队列内容中指定的地址)的读内存操作时必须发送Read消息.以将其他处理器对相关共享变量所做的更新同步到该处理器的高速缓存中。

​ 因此, 解决可见性问题首先要使写线程对共享变量所做的更新能够到达(被存储到) 高速缓存,从而使该更新对其他处理器是可同步的。其次 , 读线程所在的处理器要将其无效化队列中的内容 ”应用” 到其高速缓存上, 这样才能够将其他处理器对共享变怔所做的 更新同步到该处理器的高速缓存中。

​ 而这两点是通过存储屏障与加载屏障的成对使用实现的:写线程的执行处理器所执行的存储屏障保障了该线程对共享变量所做的更新对读线程 来说是可同步的;读线程的执行处理器所执行的加载屏障将写线程对共享变扯所做的更新同步到该处理器的高速缓存之中。

​ 存储转发技术也可能导致可见性问题。

整理不易,有收获请点赞

深入学习缓存一致性问题和缓存一致性协议MESI(二)相关推荐

  1. 缓存淘汰、缓存穿透、缓存击穿、缓存雪崩、数据库缓存双写一致性

    缓存淘汰 为什么需要缓存淘汰?你需要缓存30G的数据,但是Redis本身只能使用10G的内存,那你就得做个取舍了,毕竟鱼与熊掌不可兼得.为了利益最大化肯定要保留最重要的10个G. Redis本身提供了 ...

  2. 掌握分布式环境缓存更新策略,提高缓存与数据库双写一致性!

    概述 随着时代的发展,服务系统架构也已经由最初的单体架构转变为分布式.微服务架构模式. 从数据体量上来看,各系统存储的数据量越来越大,数据的查询性能越来越低. 此时,就需要我们不断的进行优化,最常用的 ...

  3. mysql 多线程 一致性_常见缓存数据库一致性方案(建议收藏)

    项目中常常会用到redis 作为缓存抵挡大量流量直接冲击数据库mysql,那么必然涉及缓存和数据库数据的一致性(尽量短时间内最终一致性)问题. 导致不一致的原因主要有三种情况: 1:并发下,读取旧数据 ...

  4. mysql数据库雪崩_缓存与数据库一致性之三:缓存穿透、缓存雪崩、key重建方案...

    缓存穿透是指查询一个根本不存在的数据,缓存层和存储层都不会命中,但是出于容错的考虑,如果从存储层查不到数据则不写入缓存层,如图 11-3 所示整个过程分为如下 3 步: 缓存层不命中 存储层不命中,所 ...

  5. 两个例子详解并发编程的可见性问题和有序性问题,通过volatile保证可见性和有序性以及volatile的底层原理——缓存一致性协议MESI和内存屏障禁止指令重排

    1. 并发编程的可见性问题 2. 并发编程的有序性问题 3. 使用volatile关键字解决可见性问题 4. 可见性问题的本质--缓存不一致 因为cpu执行速度很快,但是内存执行速度相对于CPU很慢, ...

  6. Redis缓存与数据库双写一致性

    前言: 首先,缓存由于其高并发和高性能的特性,已经在项目中被广泛使用.在读取缓存方面,大家没啥疑问,都是按照下图的流程来进行业务操作.         但是在更新缓存方面,对于更新完数据库,是更新缓存 ...

  7. 同时存多个变量缓存 微信小程序_CPU缓存一致性协议MESI,memory barrier和java volatile...

    MESI协议 MESI协议是一个被广泛使用的CPU缓存一致性协议.我们都知道在CPU中存在着多级缓存,缓存级别越低,容量就越小,速度也越快.有了缓存,CPU就不需要每次都向主存读写数据,这提高了CPU ...

  8. CPU缓存一致性协议MESI - 笔记

    CPU缓存一致性协议MESI CPU高速缓存(Cache Memory) CPU为何要有高速缓存 CPU在摩尔定律的指导下以每18个月翻一番的速度在发展,然而内存和硬盘的发展速度远远不及CPU.这就造 ...

  9. CPU缓存一致性协议MESI

    吹剑出自<庄子>:"夫吹管也,犹有也:吹剑首者,而已矣." 吹剑只能发出小声,以示自谦."并发吹剑录",表达的是笔者斗胆讲一些并发编程有关的知识,由 ...

最新文章

  1. Java初学者都应该搞懂的六个问题
  2. Servlet中如何获取param-name对应的值?
  3. 【转载】C# double和decimal数据类型以截断的方式保留指定的小数位数
  4. java线程6种状态转换,java6种线程状态
  5. java 加密服务器_Javascript端加密java服务端解密
  6. MacOS中安装Consul(启动及关闭)
  7. C++打印浮点数时保留两位小数
  8. 初中数学503个必考知识点_2020年中考数学必考知识点公布,考生高分、满分提分必备神器...
  9. sql server 加密_SQL Server机密–第一部分–加密基础知识和SQL Server加密功能
  10. Kavex GameDev-Resources
  11. 有关微信小程序用户登录界面跳转问题
  12. java order()_Java Comparator naturalOrder()用法及代码示例
  13. USB-IF发布针对盲文点字显示器的HID标准
  14. benj™ 100+城市街拍电影人像调色LR预设/移动LR预设/LUT预设效果预览
  15. python中bd是什么属性_聊一聊:Python中对象的属性
  16. 数字证书认证机构(摘录自wiki百科)
  17. Linux磁盘与文件系统管理
  18. window删除多余的操作系统
  19. 某网页在线视频有声音无图像
  20. 中国平行进口汽车行业发展方向及未来发展趋势展望报告2022-2028年

热门文章

  1. R语言:时序图和自相关图
  2. 谷歌浏览器+WIN10系统兼容问题(谷歌浏览器64位崩溃问题)
  3. 车载FAKRA 高清倒车影像连接线束
  4. Learning Python 008 正则表达式-004 sub()方法
  5. C++ 算法学习四(直线、抛物线拟合)
  6. js实现input的赋值,val()方法无法赋值问题
  7. 【金猿人物展】凯捷咨询史凯:未来要充分利用数据要素和数字化生产力打造企业升维新优势...
  8. 百度地图根据坐标获取地址信息
  9. powermill10.0四轴联动圆雕木雕编程视频教程
  10. 20190923,两个月后的打球