redis队列list时效性过期解决方案

redis的list可以用作队列，效率高，好用，但是有个缺点就是队列的时效性只能统一设置，一个list一个，要过期只能批量过期，不能达到只过旧的数据，新数据保留的情况。

网上解决方法是换成sring，每个单个项目单独设置ttl，不用list ,批量用keys + * 正则表表达式过滤，可以批量pos数据出来达到队列效果,但是redis官网上描述有keys只能用作debug模式，性能上会产生比较大的影响。

另一种解决方案就是采用多个list，分时间片段做队列，取队列优先按照到期时间近的队列取，队列分别过期方式，大概实现方法如下

规则：

(1) 设置两个list --> parta , partb

(2) 时限分为 2个区域【总ttl】 = 【可写入】 + 【不可写入等待期】

比如： ttl = 48小时，写入list队列规则为 0~24 小时可写， 24~48 小时队列不再写入，等到ttl到期销毁， ttl=24+24

（3）两个 parta , partb 分别轮流时间写入

创建parta--->写入parta队列--->parta到了等待期 ---> 创建partb 写入 ---->写入partb队列--->partb到了等待期---->创建parta写入（此时前一个parta应该已经销毁）

代码：

    long expire_a = redisUtil.getExpire(parta_list);long expire_b = redisUtil.getExpire(partb_list);//（24小时等待过期）long expire_out = 24;//两个分区时间间隔大小long expire = 24 * 2;if (expire_a > expire_out && expire_a>=expire_b-100) {//队列a还有剩余时间 ,且 a >= b (100秒作为误差）redisUtil.ListSet("parta", ob);//不设置ttl} else if (expire_b > expire_out && expire_a<=expire_b) {//队列b还有剩余时间 ,且 b >= aredisUtil.ListSet("partb", ob);//不设置ttl} else if ((expire_a < 0 && expire_b < 0) || (expire_a < 0 && expire_b <= expire_out)) { //队列a ,b 不存在,新建队列a//队列a(a可能-1,-2)没有剩余时间且<0, 队列b没有剩余时间(b可能>0,=0,=-1,=-2),新建队列aredisUtil.ListSet("parta", ob, expire);//设置ttl} else if (expire_a <= expire_out && expire_b < 0) {//队列a(a可能-2,-1,0,>0)没有有剩余时间 且 队列b(b可能-2,-1)没有剩余时间且<0，新建队列bredisUtil.ListSet("partb", ob, expire);//设置ttl}else{//此处属于意外情况，理论上不存在，比如 a和b 几乎相同（不可能）//或者 a|b消亡一瞬间的，由于物理原因延迟几秒,还存在0状况，或未被及时销毁不为-2 ，造成 a|b 两个不可写入时间重叠，两个都无法写入//谁剩余时间大，写谁，不设置ttlif (expire_a >= expire_b)redisUtil.ListSet("parta", ob);//不设置ttl;elseredisUtil.ListSet("partb", ob);//不设置ttl}

redis队列list时效性过期解决方案相关推荐

php中redis设置队列过期时间,如何在php中使用redis队列操作
如何在php中使用redis队列操作发布时间:2021-02-04 18:36:00 来源:亿速云阅读:90 作者:Leah 这篇文章给大家介绍如何在php中使用redis队列操作,内容非常详细, ...
Laravel/Lumen 使用 Redis队列
一.概述在Web开发中,我们经常会遇到需要批量处理任务的场景,比如群发邮件.秒杀资格获取等,我们将这些耗时或者高并发的操作放到队列中异步执行可以有效缓解系统压力.提高系统响应速度和负载能力. 二.配 ...
redis队列缓存 + mysql 批量入库 + php离线整合
需求背景:有个调用统计日志存储和统计需求,要求存储到mysql中:存储数据高峰能达到日均千万,瓶颈在于直接入库并发太高,可能会把mysql干垮. 问题分析思考:应用网站架构的衍化过程中,应用最新的框 ...
高性能分布式缓存redis(持久化原理安全策略过期删除内存淘汰策略性能压测高可用 Redis Cluster)
redis redis(持久化原理安全策略过期删除&内存淘汰策略性能压测高可用 Redis Cluster) 1. 持久化原理 1.1 持久化流程(落盘) 1.2 RDB详解 1.2. ...
Redis队列实现Java版秒杀系统（无脚本、可用于生产）
本文系转载,原作者:控场的朴哥原文地址:blog.csdn.net/weixin_43074462/article/details/103756536 写在前面需求是做一个秒杀系统,比如大家来抢1 ...
Thinkphp5中使用redis队列发送消息
文章目录前言一.php中怎么安装redis? 二.windows中安装redis 三.Thinkphp5中安装think-queue扩展四.在项目中实际使用. 总结前言 REmote DIct ...
Redis 队列和MQ 对比
简介为了保障基础服务的稳定,需要对MQ进行灾备,这个灾备主要是防患MQ突然不可能,基础服务依然可以调用其他队列来继续正常运行.第一想法是引入其他MQ中间件来做灾备,这样只需要实现一套生产者消费者就好 ...
redis缓存穿透问题及解决方案代码实现
1.定义及解决方案缓存穿透 :缓存穿透是指客户端请求的数据在缓存中和数据库中都不存在,这样缓存永远不会生效,这些请求都会打到数据库. 常见的解决方案有两种: 缓存空对象优点:实现简单,维护方便缺 ...
Redis 队列实现Java版秒杀系统（无脚本、可用于生产）
写在前面需求是做一个秒杀系统,比如大家来抢100台手机,先到先得. 查阅了网上很多用redis实现秒杀的demo(java语言),竟然没一个能用的!!! 有些是php的,没闲心研究了,现在说说为什么 ...

redis队列list时效性过期解决方案

redis队列list时效性过期解决方案相关推荐

最新文章

热门文章