2019独角兽企业重金招聘Python工程师标准>>>

我们在使用redis时,一般会设置一个过期时间,当然也有不设置过期时间的,也就是永久不过期。

当我们设置了过期时间,redis是如何判断是否过期,以及根据什么策略来进行删除的。

redis设置过期时间:

expire key time(以秒为单位)–这是最常用的方式

setex(String key, int seconds, String value)–字符串独有的方式

注:

除了字符串自己独有设置过期时间的方法外,其他方法都需要依靠expire方法来设置时间

如果没有设置时间,那缓存就是永不过期

如果设置了过期时间,之后又想让缓存永不过期,使用persist key

三种过期策略:

定时删除

含义:在设置key的过期时间的同时,为该key创建一个定时器,让定时器在key的过期时间来临时,对key进行删除

优点:保证内存被尽快释放

缺点:

  • 若过期key很多,删除这些key会占用很多的CPU时间,在CPU时间紧张的情况下,CPU不能把所有的时间用来做要紧的事儿,还需要去花时间删除这些key
  • 定时器的创建耗时,若为每一个设置过期时间的key创建一个定时器(将会有大量的定时器产生),性能影响严重

懒汉式式删除

含义:key过期的时候不删除,每次通过key获取值的时候去检查是否过期,若过期,则删除,返回null。

优点:删除操作只发生在通过key取值的时候发生,而且只删除当前key,所以对CPU时间的占用是比较少的,而且此时的删除是已经到了非做不可的地步(如果此时还不删除的话,我们就会获取到了已经过期的key了)

缺点:若大量的key在超出超时时间后,很久一段时间内,都没有被获取过,那么可能发生内存泄露(无用的垃圾占用了大量的内存)

定期删除

含义:每隔一段时间执行一次删除过期key操作

优点:

  • 通过限制删除操作的时长和频率,来减少删除操作对CPU时间的占用–处理”定时删除”的缺点
  • 定期删除过期key–处理”懒汉式删除”的缺点

缺点:

在内存友好方面,不如”定时删除”(会造成一定的内存占用,但是没有懒汉式那么占用内存)  在CPU时间友好方面,不如”懒汉式删除”(会定期的去进行比较和删除操作,cpu方面不如懒汉式,但是比定时好)

难点:合理设置删除操作的执行时长(每次删除执行多长时间)和执行频率(每隔多长时间做一次删除)(这个要根据服务器运行情况来定了),每次执行时间太长,或者执行频率太高对cpu都是一种压力。

每次进行定期删除操作执行之后,需要记录遍历循环到了哪个标志位,以便下一次定期时间来时,从上次位置开始进行循环遍历

说明:memcached只是用了惰性删除,而redis同时使用了惰性删除与定期删除,这也是二者的一个不同点(可以看做是redis优于memcached的一点);

对于懒汉式删除而言,并不是只有获取key的时候才会检查key是否过期,在某些设置key的方法上也会检查(eg.setnx key2 value2:该方法类似于memcached的add方法,如果设置的key2已经存在,那么该方法返回false,什么都不做;如果设置的key2不存在,那么该方法设置缓存key2-value2。假设调用此方法的时候,发现redis中已经存在了key2,但是该key2已经过期了,如果此时不执行删除操作的话,setnx方法将会直接返回false,也就是说此时并没有重新设置key2-value2成功,所以对于一定要在setnx执行之前,对key2进行过期检查)。

Redis采用的过期策略

懒汉式删除+定期删除

懒汉式删除流程:

  • 在进行get或setnx等操作时,先检查key是否过期;
  • 若过期,删除key,然后执行相应操作;
  • 若没过期,直接执行相应操作;

定期删除流程(简单而言,对指定个数个库的每一个库随机删除小于等于指定个数个过期key):

  • 遍历每个数据库(就是redis.conf中配置的”database”数量,默认为16)
  • 检查当前库中的指定个数个key(默认是每个库检查20个key,注意相当于该循环执行20次,循环体是下边的描述)
  • 如果当前库中没有一个key设置了过期时间,直接执行下一个库的遍历
  • 随机获取一个设置了过期时间的key,检查该key是否过期,如果过期,删除key
  • 判断定期删除操作是否已经达到指定时长,若已经达到,直接退出定期删除。

对于定期删除,在程序中有一个全局变量current_db来记录下一个将要遍历的库,假设有16个库,我们这一次定期删除遍历了10个,那此时的current_db就是11,下一次定期删除就从第11个库开始遍历,假设current_db等于15了,那么之后遍历就再从0号库开始(此时current_db==0)

总结

在实际中,如果我们要自己设计过期策略, 在使用懒汉式删除+定期删除时,控制时长和频率这个尤为关键,需要结合服务器性能,已经并发量等情况进行调整,以致最佳。

欢迎学Java和大数据的朋友们加入java架构交流: 855835163
群内提供免费的架构资料还有:Java工程化、高性能及分布式、高性能、深入浅出。高架构。性能调优、Spring,MyBatis,Netty源码分析和大数据等多个知识点高级进阶干货的免费直播讲解  可以进来一起学习交流哦

转载于:https://my.oschina.net/u/3959468/blog/3008101

Redis过期策略及实现原理相关推荐

  1. redis过期策略和持久化

    Redis过期策略 注:本文主要参考自<Redis设计与实现> 1.设置过期时间 expire key time(以秒为单位)--这是最常用的方式 setex(String key, in ...

  2. Redis过期策略与内存淘汰机制

    参考博客:https://blog.csdn.net/u010006156/article/details/124914082 Redis过期策略与内存淘汰机制 过期策略简介 作用 redis数据都是 ...

  3. @cacheable 设置过期时间_缓存面试三连击——聊聊Redis过期策略?内存淘汰机制?再手写一个LRU 吧!...

    大家好,今天我和大家想聊一聊有关redis的过期策略的话题. 听到这里你也许会觉得:"我去,我只是个日常搬砖的,这种偏底层的知识点,我需要care吗?" 话虽如此·,但是兄die, ...

  4. redis 过期策略

    redis 过期策略是:定期删除+惰性删除. 所谓定期删除,指的是 redis 默认是每隔 100ms 就随机抽取一些设置了过期时间的 key,检查其是否过期,如果过期就删除. 假设 redis 里放 ...

  5. Redis 过期策略和淘汰策略

    1.Redis 过期策略 Redis 过期策略用于处理设置了缓存时间的数据,使用定时扫描和惰性删除机制删除到期的缓存数据. Redis 将设置了过期时间的 key 保存在一个独立的字典中,定时扫描就是 ...

  6. redis过期策略与淘汰策略

    redis过期策略与淘汰策略 1.过期策略 2.淘汰策略 3.在哪里配置? 4.Lazy Free 1.过期策略 1.redis中所有的key都可以通过expire命令来设置过期时间,所有被设置了过期 ...

  7. Redis过期策略 实现原理

    我们在使用redis时,一般会设置一个过期时间,当然也有不设置过期时间的,也就是永久不过期. 当我们设置了过期时间,redis是如何判断是否过期,以及根据什么策略来进行删除的. 1.redis设置过期 ...

  8. Redis过期策略---实现原理

    我们在使用redis时,一般会设置一个过期时间,当然也有不设置过期时间的,也就是永久不过期. 当我们设置了过期时间,redis是如何判断是否过期,以及根据什么策略来进行删除的. 1.redis设置过期 ...

  9. 第九章 Redis过期策略

    注:本文主要参考自<Redis设计与实现> 1.设置过期时间 expire key time(以秒为单位)--这是最常用的方式 setex(String key, int seconds, ...

最新文章

  1. JS中获取焦点和选中的元素
  2. python代码大全p-【python】10分钟教你用python一行代码搞点大新闻
  3. BCB中获得RichEdit 默认行间距
  4. 机械秒表的使用方法_瓦楞纸箱防水性能检测方法
  5. 主从复制1062错误的解决方法
  6. Java中看今天是星期几,礼拜几
  7. 【转】如何修改IIS的默认端口号
  8. python创意小作品-全国青少年创意编程与智能设计大赛Python创意编程比赛
  9. WinForm 单例模式实例
  10. 用什么软件测试路由器,软件测试路由器系统的方法及其运用
  11. qpython3h数字雨代码,html开发数字雨特效代码
  12. html 自动执行vbs代码,vbs脚本教程 怎样在bat脚本中调用vbs脚本
  13. 从零编写linux0.11 - 第七章 完善终端
  14. CAD看图软件中如何将CAD图纸由天正T20版本转换为T3版本?
  15. ~《概率论》~贝叶斯公式
  16. arcos的matlab定义,想用matlab解一个带arccos的方程。可是结果好像没有解析解。求帮助解数值解...
  17. NLP自然语言 - jieba分词库
  18. epub解压的多个html制作单个html
  19. 光大银行h5支付(php接入光大银行h5支付)
  20. 桂林理工大学专科计算机专业在哪个校区,桂林理工大学专科在哪个校区

热门文章

  1. Maven项目在pom文件中引入lib下的第三方jar包并打包进去
  2. C#中窗口关闭时没有取消事件订阅导致事件重复执行的解决方法
  3. BJUI使用ajax异步表单提交时后台action要加@ResponseBody
  4. 【TensorFlow】笔记2:深层神经网络
  5. 基于c++的马氏距离算法代码_监控警戒区基于掩码算法的简单实现(附代码)
  6. 视频+PPT | 企业服务进阶第一课:客户全生命周期运营总览
  7. 神策用户标签系统,深入业务构建用户价值体系
  8. 页面浏览事件之 $AppViewScreen 全埋点
  9. 神策 FM | 20 种方法,让你成为用户的知心朋友
  10. 中商惠民签约神策数据 致力为客户提供最优服务模式