redis集群批量删除指定的key

工作中遇到一个问题,redis中存储了大量的key,而且没有设置时效,其中很大一部分后来都没用了,导致redis体积庞大,查询缓慢。服务器版本为windows,网上搜索到很多批量删除的方法都是Linux下的,几番寻找,终于找到了在windows下批量删除超大量key的方法。
首先贴一下Linux下的方法:

 redis-cli keys"*" |xargs redis-cli del

//如果redis-cli没有设置成系统变量,需要指定redis-cli的完整路径,加入redis-cli的安装路径如下：

那么在gitbash上模拟的linux命令则如下:

./redis-cli keys "*lz*"|xargs ./redis-cli del

原理就是通过xargs工具将前半部分的查询结果借助管道传递给后面的删除命令，进而实现循环删除，达到批量删除的结果。
But,测试的时候趣发现这条命令不好使,测试结果如下图所示，具体的原因不明:

作为替代方案，我找到了windows、Linux下均试用的方法:
使用lua脚本:

redis-cli eval "redis.call('del', unpack(redis.call('keys','*')))" 0

但这种处理方式,量大的情况下,lua函数unpack会出现问题,会报错误

(error) ERR Error running script (call to f_e177a091510d969af3b388ee986dbe6658df6b57): user_script:1: too many results to unpack

解决方法:
一次性unpack太多会出问题,那就干脆一次5000吧,这样就不会有问题了,实测速度非常快哦。

redis-cli eval "local keys = redis.call('keys', ARGV[1]) for i=1,#keys,5000 do redis.call('del', unpack(keys, i, math.min(i+4999, #keys))) end return #keys" 0 'value*'

所以最终实现我的需求的代码就是：

redis-cli eval "redis.call('del', unpack(redis.call('keys','*lz*')))" 0redis-cli eval "local keys = redis.call('keys', ARGV[1]) for i=1,#keys,5000 do redis.call('del', unpack(keys, i, math.min(i+4999, #keys))) end return #keys" 0 '*lz*'

上述语句的执行原理其实是递归调用，通过递归最终实现了批量删除。

在redis集群中可以借助脚本实现集群上的批量删除，这个还没测试过。参考文章如下:
redis集群批量删除指定的key

本文参考文章:
redis批量删除key （windows适用）

redis集群批量删除指定的key相关推荐

Redis集群批量删除key
一.说明通常为了减轻数据库的压力提高性能,我们会使用数据缓存(我使用的redis).但是有时出于各种目的(比如有个配置需要立即刷新)我们需要将redis中某种类型(通常是有固定的前缀)的数据批量删除 ...
redis批量删除指定的key
批量删除Key Redis 中有删除单个 Key 的指令 DEL,可以借助 Linux 的 xargs 指令来完成这个动作 [plain] view plain copy redis-cli keys ...
Redis登陆服务器和批量删除指定的key
ps -ef |grep redis cd /opt/app/redis/bin ./redis-cli -h 192.168.0.67 -p 7001 -a 'hub2c!Redis' ./redi ...
Linux下redis 以关键字批量删除数据
删除以某些key(info)开头得数据,总结了一下: 环境配置: CentOS-6,redis-3.2.8,双机主备集群 192.168.149.212:7018,7019,7020:(master) ...
八、twemproxy实现redis集群
参考Twemproxy 介绍与使用一.介绍 1.简介 Twemproxy也叫nutcraker,是twtter开源的一个redis和memcache代理服务器程序.redis作为一个高效的缓存服务器 ...
java redis集群操作,java操作redis3.0集群
java(JedisCluster)操作redis集群这里只是几个简单的demo,直接上代码吧,没啥好说的 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 ...
redis优雅的批量删除key
redis优雅的批量删除key 近期在处理redis的故障中,发现需要删除大量的历史数据(也是bigkeys),好在符合正则表达式.要不然就很痛苦,这也体现了在设计key的时候遵循规范带来的维护好处之 ...
redis指定配置文件启动_深入学习 Redis 集群搭建方案及实现原理
" 在前面的文章中已经介绍了本文将详细介绍集群,主要内容包括: 集群的作用集群的搭建方法及设计方案集群的基本原理客户端访问集群的方法实践须知(集群伸缩.故障转移.参数优化等) 集群 ...
关于Redis集群模式下，使用mget通过keys批量获取value时的解决方案
关于Redis集群模式下,使用mget通过keys批量获取value时的解决方案今天在做项目的时候,需要使用到mget命令,通过一个批量的key去获取对应的value集合,但是取值的时候,报了这个错 ...

redis集群批量删除指定的key

redis集群批量删除指定的key相关推荐

最新文章

热门文章