redis集群批量删除指定的key

痛定思痛。 2022-05-21 06:23 435阅读 0赞

工作中遇到一个问题,redis中存储了大量的key,而且没有设置时效,其中很大一部分后来都没用了,导致redis体积庞大,查询缓慢。服务器版本为windows,网上搜索到很多批量删除的方法都是Linux下的,几番寻找,终于找到了在windows下批量删除超大量key的方法。  
首先贴一下Linux下的方法:

redis-cli keys"*" |xargs redis-cli del

//如果redis-cli没有设置成系统变量,需要指定redis-cli的完整路径,加入redis-cli的安装路径如下：  
![这里写图片描述][70]  
那么在gitbash上模拟的linux命令则如下:

./redis-cli keys "*lz*"|xargs ./redis-cli del

原理就是通过xargs工具将前半部分的查询结果借助管道传递给后面的删除命令，进而实现循环删除，达到批量删除的结果。  
But,测试的时候趣发现这条命令不好使,测试结果如下图所示，具体的原因不明:  
![这里写图片描述][70 1]

--------------------

作为替代方案，我找到了windows、Linux下均试用的方法:  
使用lua脚本:

redis-cli eval "redis.call('del', unpack(redis.call('keys','*')))" 0

但这种处理方式,量大的情况下,lua函数unpack会出现问题,会报错误

> (error) ERR Error running script (call to f\_e177a091510d969af3b388ee986dbe6658df6b57): user\_script:1: too many results to unpack

解决方法:  
一次性unpack太多会出问题,那就干脆一次5000吧,这样就不会有问题了,实测速度非常快哦。

redis-cli eval "local keys = redis.call('keys', ARGV[1]) for i=1,#keys,5000 do redis.call('del', unpack(keys, i, math.min(i+4999, #keys))) end return #keys" 0 'value*'

所以最终实现我的需求的代码就是：

redis-cli eval "redis.call('del', unpack(redis.call('keys','*lz*')))" 0 redis-cli eval "local keys = redis.call('keys', ARGV[1]) for i=1,#keys,5000 do redis.call('del', unpack(keys, i, math.min(i+4999, #keys))) end return #keys" 0 '*lz*'

上述语句的执行原理其实是递归调用，通过递归最终实现了批量删除。

--------------------

在redis集群中可以借助脚本实现集群上的批量删除，这个还没测试过。参考文章如下:  
[redis集群批量删除指定的key][redis_key]

本文参考文章:  
[redis批量删除key （windows适用）][redis_key _windows]

[70]: /images/20220521/fe8ad9ea042f4a8fa7c5f2ef40608861.png
[70 1]: /images/20220521/1be42bc3f7fd481fa989abe6b0b458d5.png
[redis_key]: http://blog.51cto.com/ganbing/2050111
[redis_key _windows]: https://www.aliyun.com/jiaocheng/874744.html