1. MySQL持久化数据,Redis只读数据
redis在启动之后,从数据库加载数据。
读请求:
不要求强一致性的读请求,走redis,要求强一致性的直接从mysql读取
写请求:
数据首先都写到数据库,之后更新redis(先写redis再写mysql,如果写入失败事务回滚会造成redis中存在脏数据)
2.MySQL和Redis处理不同的数据类型
MySQL处理实时性数据,例如金融数据、交易数据】
Redis处理实时性要求不高的数据,例如网站最热贴排行榜,好友列表等
在并发不高的情况下,读操作优先读取redis,不存在的话就去访问MySQL,并把读到的数据写回Redis中;写操作的话,直接写MySQL,成功后再写入Redis(可以在MySQL端定义CRUD触发器,在触发CRUD操作后写数据到Redis,也可以在Redis端解析binlog,再做相应的操作)
在并发高的情况下,读操作和上面一样,写操作是异步写,写入Redis后直接返回,然后定期写入MySQL
几个例子:
1.当更新数据时,如更新某商品的库存,当前商品的库存是100,现在要更新为99,先更新数据库更改成99,然后删除缓存,发现删除缓存失败了,这意味着数据库存的是99,而缓存是100,这导致数据库和缓存不一致。
解决方法:
这种情况应该是先删除缓存,然后在更新数据库,如果删除缓存失败,那就不要更新数据库,如果说删除缓存成功,而更新数据库失败,那查询的时候只是从数据库里查了旧的数据而已,这样就能保持数据库与缓存的一致性。
2.在高并发的情况下,如果当删除完缓存的时候,这时去更新数据库,但还没有更新完,另外一个请求来查询数据,发现缓存里没有,就去数据库里查,还是以上面商品库存为例,如果数据库中产品的库存是100,那么查询到的库存是100,然后插入缓存,插入完缓存后,原来那个更新数据库的线程把数据库更新为了99,导致数据库与缓存不一致的情况
解决方法:
遇到这种情况,可以用队列的去解决这个问,创建几个队列,如20个,根据商品的ID去做hash值,然后对队列个数取摸,当有数据更新请求时,先把它丢到队列里去,当更新完后在从队列里去除,如果在更新的过程中,遇到以上场景,先去缓存里看下有没有数据,如果没有,可以先去队列里看是否有相同商品ID在做更新,如果有也把查询的请求发送到队列里去,然后同步等待缓存更新完成。
这里有一个优化点,如果发现队列里有一个查询请求了,那么就不要放新的查询操作进去了,用一个while(true)循环去查询缓存,循环个200MS左右,如果缓存里还没有则直接取数据库的旧数据,一般情况下是可以取到的。
在高并发下解决场景二要注意的问题:
(1)读请求时长阻塞
由于读请求进行了非常轻度的异步化,所以一定要注意读超时的问题,每个读请求必须在超时间内返回,该解决方案最大的风险在于可能数据更新很频繁,导致队列中挤压了大量的更新操作在里面,然后读请求会发生大量的超时,最后导致大量的请求直接走数据库,像遇到这种情况,一般要做好足够的压力测试,如果压力过大,需要根据实际情况添加机器。
(2)请求并发量过高
这里还是要做好压力测试,多模拟真实场景,并发量在最高的时候QPS多少,扛不住就要多加机器,还有就是做好读写比例是多少
(3)多服务实例部署的请求路由
可能这个服务部署了多个实例,那么必须保证说,执行数据更新操作,以及执行缓存更新操作的请求,都通过nginx服务器路由到相同的服务实例上
(4)热点商品的路由问题,导致请求的倾斜
某些商品的读请求特别高,全部打到了相同的机器的相同丢列里了,可能造成某台服务器压力过大,因为只有在商品数据更新的时候才会清空缓存,然后才会导致读写并发,所以更新频率不是太高的话,这个问题的影响并不是很大,但是确实有可能某些服务器的负载会高一些。

摘自:https://blog.csdn.net/Thousa_Ho/article/details/78900563

转载于:https://www.cnblogs.com/wt645631686/p/8454686.html

Redis 如何保持和MySQL数据一致【一】相关推荐

  1. redis缓存mysql_redis缓存mysql数据

    redis (Remote Dictionary Server)是一个开源(BSD许可)的,内存中的数据结构存储系统,它可以用作数据库.缓存和消息中间件.它支持存储的value类型相对更多,包括str ...

  2. Redis 如何保持和 MySQL 数据一致

    1.MySQL持久化数据,Redis只读数据 redis在启动之后,从数据库加载数据. 读请求: 不要求强一致性的读请求,走redis,要求强一致性的直接从mysql读取 写请求: 数据首先都写到数据 ...

  3. Redis 缓存和 MySQL 数据如何实现一致性?

    需求起因 在高并发的业务场景下,数据库大多数情况都是用户并发访问最薄弱的环节.所以,就需要使用redis做一个缓冲操作,让请求先访问到redis,而不是直接访问MySQL等数据库. 这个业务场景,主要 ...

  4. Redis和mysql数据怎么保持数据一致的?

    需求起因 在高并发的业务场景下,数据库大多数情况都是用户并发访问最薄弱的环节.所以,就需要使用redis做一个缓冲操作,让请求先访问到redis,而不是直接访问MySQL等数据库. 这个业务场景,主要 ...

  5. 阿里云 redis mysql_Redis 和 MySQL数据一致

    1.MySQL和Redis处理不同类型的数据 读请求:对于一些实时性要求不高的数据,列如好友列表.近期回复,Redis进行处理.对于实时性要求高的数据,列如金融数据和交易数据,MySQL进行处理.在并 ...

  6. mysql怎么保证热点数据_MySQL里有2000w数据,redis中只存20w数据,如何保证redis中数据都是热点数据...

    计算20w的热点数据占据内存的大小.然后在Redis中,配置最大内存容量,在redis.conf文件maxmemory 标签中配置. 当redis内存数据大小上升到一定大小的时候,就会施行数据淘汰策略 ...

  7. MySQL数据同步到 Redis 缓存的几种方法

    1 Mysql查完数据,再同步写入到Redis中 缺点1:会对接口造成延迟,因为同步写入redis本身就有延迟,并且还要做重试,如果redis写入失败,还需要重试,那就更费时间了. 缺点2:不解耦,如 ...

  8. 如何把MySQL数据迁移到Redis

    使用Redis的管道传输功能,可以将RDS for MySQL或本地MySQL的数据快速迁移到Redis中.使用其它引擎的RDS数据库也可以参照本文的方法将数据迁移到Redis中. 场景介绍 在应用与 ...

  9. redis与mysql数据同步_Redis与MySQL数据同步解决方案

    数据库同步到Redis 我们大多倾向于使用这种方式,也就是将数据库中的变化同步到Redis,这种更加可靠.Redis在这里只是做缓存. 方案1 做缓存,就要遵循缓存的语义规定: 读:读缓存redis, ...

最新文章

  1. 独家 | 教你用不到30行的Keras代码编写第一个神经网络(附代码教程)
  2. CSS transition delay简介与进阶应用
  3. 深入了解EJB (一) EJB在java世界的地位
  4. vue xxx was assigned to but it has no setter.
  5. QT的QBitArray 类的使用
  6. c/c++ 阻塞和非阻塞,fcntl应用
  7. 401 Palindrome
  8. P2444-[POI2000]病毒【AC自动机】
  9. ubuntu安装proxychains及自动补全
  10. Android studio gradle task list 不显示问题
  11. v-for 循环 @click 动态传参(参数动态)
  12. DB2 错误 54001
  13. 职业培训学校计算机培训计划,职业技能学校关于计算机应用一级MS-Office培训开班计划.doc...
  14. Unity Shader学习(五)鼠标移动方块
  15. 基于UDP的企业级大文件传输体系
  16. PHP7有哪些新特性
  17. 虹科教您 | KPA Automation softPLC入门操作指南(1)
  18. 区块链人才能力评价测试机构亮相
  19. 在chrome浏览器中使用Host Switch Plus进行环境切换
  20. 基于ArrayList实现HashMap代码

热门文章

  1. Android Preference 须知
  2. Android Binder 分析——匿名共享内存(Ashmem)
  3. 中班科学计算机,幼儿园中班科学课件:《照镜子》
  4. 无法访问本地ip_当金万维异速联无法访问金蝶软件怎么办?
  5. mysql查询时间类型c语言处理_资讯类app用户热度及资讯类型分析-Mysql进行数据预处理...
  6. SVM(支持向量机)综述
  7. [codevs 1904] 最小路径覆盖问题
  8. 腾讯2019暑期实习生提前批CV岗笔试题
  9. php获取两个输入框的值,PHP获取多个文本框中值的实例代码
  10. java接口和实例_java – 接口和实例化