背景

日前面试的时候被问到我们项目里面使用Redis的时候是如何更新缓存的,我的回答是写操作的时候的时候把缓存删了,然后读操作的时候就会读取出来最新的值。面试管继续问:Redis的写时更新和读时更新有什么区别没有?我的回答只是说写的时候直接删缓存的话这种方式会好实现一点,并没有答上来其他的一些区别。回来后好好的补了一番这方面的知识,特此做一个记录,以免下次再掉坑里。

什么是写时更新和读时更新

写时更新:当我们往数据库写数据的时候我们去更新缓存,包括先更新缓存再更新数据库和先更新数据库再更新缓存。
写时删除,读时更新:当我们往数据库写数据的时候我们直接删除缓存,然后其他请求读数据的时候更新缓存。包括先删除缓存再更新数据和先更新数据库再删除缓存。

缓存更新到底是读更新好还是写更新好?

读更新好,为什么?

  1. 如果你是一个写数据库场景比较多,而读数据场景比较少的业务需求,采用这种方案就会导致,数据压根还没读到,缓存就被频繁的更新,浪费性能。
  2. 同时有请求A和请求B进行更新操作,那么会出现 (1)线程A更新了数据库 (2)线程B更新了数据库 (3)线程B更新了缓存 (4)线程A更新了缓存。这就出现请求A更新缓存应该比请求B更新缓存早才对,但是因为网络等原因,B却比A更早更新了缓存。这就导致了脏数据,因此不考虑。

那么也就是说,如果是写更新的话,不管从性能的角度还是从线程安全的角度来说这种方案都不好。

读时更新有没有什么问题?

前面我们说了,如果是写更新,会有效率和线程安全性的问题,那如果是读更新又会有什么问题呢?
读时更新:当我们往数据库写数据的时候我们直接删除缓存,然后其他请求读数据的时候更新缓存。读时更新又包括如下2种方案。

  1. 先删除缓存再更新数据库
  2. 先更新数据库再删除缓存。

先更新数据库再删除缓存

问题一、如果在高并发的场景下,会出现数据库与缓存数据不一致

  1. 缓存刚好失效 线程 A 查询数据库,得一个旧值
  2. 线程 B 将新值写入数据库
  3. 线程 B 删除缓存
  4. 线程 A 将查到的旧值写入缓存

但出现的概率特别低,为什么呢?

我们需要线程A读操作必需在B线程写操作前进入数据库操作,而又要晚于B写操作更新缓存,所有的这些条件都具备的概率基本并不大。那么如何解决这个低概率问题呢?
设置缓存的过期时间,这样可以达到最终一致性

问题二、如果删除缓存失败或更新数据库失败了会怎样?

  • 第一步操作数据库成功,第二步删除缓存失败,会导致数据库里是新数据,而缓存里是旧数据。
  • 第一步操作数据库就失败了,第二步更新缓存不会执行,不会出现数据不一致。

如何解决删除缓存失败的问题?

将需要删除的 key 发送到消息队列中 自己消费消息,获得需要删除的 key 不断重试删除操作,直到成功

先删除缓存再更新数据库

问题一、如果在高并发的场景下,会出现数据库与缓存数据不一致

  1. 线程 A 删除了缓存 线程 B 查询,发现缓存已不存在
  2. 线程 B 去数据库查询得到旧值
  3. 线程 B 将旧值写入缓存
  4. 线程 A 将新值写入数据库

如何解决?设置缓存的过期时间,这样可以达到最终一致性

问题二、如果删除缓存失败或更新数据库失败了会怎样?

  • 第一步删除缓存成功,第二步更新数据库失败,数据库和缓存的数据还是一致的。
  • 第一步删除缓存就失败了,第二步更新数据库不会去执行,数据库和缓存的数据还是一致的。

也就是说并不会导致数据不一致问题。

小总结:对比两种策略

先删除缓存,再更新数据库:在高并发下相对更容易出现数据不一致问题,但在原子性被破坏时(删除缓存失败或更新数据库失败)并不会出现数据一致性问题
先更新数据库,再删除缓存:在高并发下相对出现数据不一致问题概率很低,但在原子性被破坏时(删除缓存失败或更新数据库失败)会出现数据一致性问题

要解决这一切的比较简单的解决方案就是要给KEY设置过期时间

其他的解决方案

延时双删策略
伪代码如下

public void write(String key,Object data){redis.delKey(key);db.updateData(data);Thread.sleep(1000);redis.delKey(key);
}

转化为中文描述就是

  1. 先淘汰缓存
  2. 再写数据库
  3. 休眠1秒
  4. 再次淘汰缓存.

为什么这种方式可以解决脏缓存(缓存数据与数据库不一致)的问题呢?要造成脏缓存,就需要在缓存被删除后,数据库被更新前有请求读取到了旧数据并更新了缓存,那么这边睡眠一秒后再次删除缓存就可以把这个短暂的时间间隔内产生的脏缓存再次删除掉。

阿里canal解决方案
该方案的基本原理为:启动一个订阅程序去订阅数据库的binlog,获得需要操作的数据。在应用程序中,另起一段程序,获得这个订阅程序传来的信息,进行删除缓存操作。

具体使用见阿里canal GitHub:https://github.com/alibaba/canal

LinkedIn的DataBus
其原理和阿里的Canal一致

参考

https://learnku.com/articles/22363
https://juejin.im/post/6844904029479256077

Redis的读更新和写更新-如何保证Redis与数据库的数据一致性相关推荐

  1. mysql怎么保证热点数据_MySQL里有2000w数据,redis中只存20w数据,如何保证redis中数据都是热点数据...

    计算20w的热点数据占据内存的大小.然后在Redis中,配置最大内存容量,在redis.conf文件maxmemory 标签中配置. 当redis内存数据大小上升到一定大小的时候,就会施行数据淘汰策略 ...

  2. session.merge 缓存不更新_如何保证缓存与数据库双写时的数据一致性?

    在做系统优化时,想到了将数据进行分级存储的思路.因为在系统中会存在一些数据,有些数据的实时性要求不高,比如一些配置信息.基本上配置了很久才会变一次.而有一些数据实时性要求非常高,比如订单和流水的数据. ...

  3. 深入理解操作系统(10)第四章:处理器体系结构(2)Y86-64的顺序实现(包括:SEQ/指令的各阶段操作:取指,解码,执行,访存,回写,更新PC/序列指令/硬件结构/时序/阶段的实现/SEQ+)

    深入理解操作系统(10)第四章:处理器体系结构(2)Y86-64的顺序实现(包括:SEQ/指令的各阶段操作:取指,解码,执行,访存,回写,更新PC/序列指令/硬件结构/时序/阶段的实现/SEQ+) 1 ...

  4. 杰理之选择并更新烧写文件到烧写器【篇】

    待烧写的芯片型号选择好后,按如图 2.7 所示步骤操作:[1]点击打开并选择 fw 文件(ufw 文件.key 文件也可以,也可烧写经过授权后带烧写次数限制的 fw/ufw 文件,可参考<7 授 ...

  5. 蓝点linux_新闻速读 gt; Windows 10 的 Linux 内核将像驱动程序一样由微软更新服务进行更新 | Linux 中国...

    本文字数:3252,阅读时长大约:4 分钟导读:• Ubuntu 发行商 Canonical 将参加微软欧洲虚拟开源峰会 • 树莓派支持 Vulkan 最新进展:通过 70000 项测试 • 谷歌浏览 ...

  6. 面试官: Redis 与 MySQL 双写一致性如何保证?

    前言 四月份的时候,有位好朋友去美团面试.他说,被问到Redis与MySQL双写一致性如何保证?这道题其实就是在问缓存和数据库在双写场景下,一致性是如何保证的?本文将跟大家一起来探讨如何回答这个问题. ...

  7. 美团二面:Redis与MySQL双写一致性如何保证?

    前言 四月份的时候,有位好朋友去美团面试.他说,被问到Redis与MySQL双写一致性如何保证?这道题其实就是在问缓存和数据库在双写场景下,一致性是如何保证的?本文将跟大家一起来探讨如何回答这个问题. ...

  8. Redis面试 - 如何保证缓存与数据库的双写一致性?

    Redis面试 - 如何保证缓存与数据库的双写一致性? 面试题 如何保证缓存与数据库的双写一致性? 面试官心理分析 你只要用缓存,就可能会涉及到缓存与数据库双存储双写,你只要是双写,就一定会有数据一致 ...

  9. mysql与redis数据同步(c/c++)(写mysql同步到redis,并且以json格式保存)

    系统开发中时常会需要缓存来提升并发读的能力,这时可以通过mysql的UDF和hiredis来进行同步 原理: 通过mysql自动同步redis 在服务端开发过程中,一般会使用MySQL等关系型数据库作 ...

最新文章

  1. 21个深度学习调参技巧,一定要看到最后一个
  2. JetBrains产品永久破解
  3. Makefile总结
  4. FP、FN、TP、TN、精确率(Precision)、召回率(Recall)、准确率(Accuracy)评价指标详述
  5. 带哨兵节点的链_HBA公链 | IPFS:区块链“不可能三角”的可能解
  6. 各种排序笔记---基于非比较排序部分
  7. oracle新建对象 权限管理
  8. 几种方法帮你更有效率的记笔记
  9. 用CSS hack技术解决浏览器兼容性问题
  10. Atitit arch design context软件架构设计的内容 目录 1. 考虑到架构设计原则 1 1.1. 开发效率 稳定性 可靠些等 性能 1 1.2. 简单原则则 1 1.3. 配置
  11. ElasticSearch搜索引擎:数据的写入流程
  12. 为什么在很多应用中常采用正态分布/高斯分布、中心极限定理
  13. WordPiece是如何基于词表对文本进行切分的
  14. 想学设计?这6款设计软件不能不知道
  15. DCB改正——关于spp
  16. 智安网络详解:零信任网络访问 (ZTNA)原理
  17. WPS如何让表格里的文字上下居中
  18. 六类网线钳能压五类水晶头吗_六类网线钳能压五类水晶头吗_网线水晶头线序的接法解析...
  19. docker下载安装Zookeeper
  20. 鼎捷易飞7.0、8.0、9.0、9.0.12等各版本下载地址

热门文章

  1. 最近最少使用算法(LRU)
  2. 去除页面上的图片和视频
  3. 【分析】Serv-U MDTM命令远程溢出分析
  4. 单片机音乐播放器课程设计C语言,单片机音乐播放器课程设计中音乐代码怎么弄...
  5. 使用X-UA-Compatible来搞定IE浏览器兼容模式
  6. vim编辑文件时[O]pen Read-Only, (E)dit anyway, (R)ecover, (D)elete it, (Q)uit, (A)bort:
  7. 行内,行内块元素同行显示问题
  8. python中型项目---Django框架---图书管理网站的制作-01
  9. MotionBuilder-bvh绑定(三)
  10. jsonp跨域请求数据实例——手机号码查询