【Redis实战】批量模糊删除(适用生产环境)

您所在的位置:网站首页 redis脚本删除大量数据 【Redis实战】批量模糊删除(适用生产环境)

【Redis实战】批量模糊删除(适用生产环境)

2024-07-14 01:40| 来源: 网络整理| 查看: 265

目前在网上看到的大部分文章都是通过keys 进行模糊匹配并删除的

下面介绍3种删除方法,建议使用linux去操作,可以结合 xargs(点击查看介绍) 命令进行操作

参数说明:

[ip]: ip地址, 参数名 -> -h [port]: 端口号, 参数名 -> -p [password]: 密码, 参数名 -> -a, 没有密码则不输入 -a [password] [index]: 缓存所在的库, 参数名 -> -n

 

keys命令

它会扫整个库,导致Redis阻塞,影响正常使用, 不建议使用

redis-cli -h [ip] -p [port] -a [password] -n [index] keys "User:*" | xargs redis-cli -h [ip] -p [port] -a [password] -n [index] del

这是目前网上常用的方法,通过keys 命令返回匹配到的key,然后再使用 xargs整合所有的并删除

但是这个方法有个致命的问题,就是它是通过keys去扫描模糊匹配,keys命令会导致Redis阻塞问题,并且keys命令在生产环境是禁用的

scan命令

它是通过游标的方式扫描 (推荐)

redis-cli -h [ip] -p [port] -a [password] -n [index] --scan --pattern 'User:*' | xargs redis-cli -h [ip] -p [port] -a [password] -n [index] del

但是这个删除又有个可以忽略不计的小问题,就是它其实是通过xargs整合所有匹配到的key然后再通过del命令去删除的

虽然del命令是O(1)的时间复杂度,但是在大量删除key的情况下还是会有很微乎其微的效率问题,所以才会说可以忽略不计的小问题

 

scan + unlink 命令

墙裂推荐

关于unlink(点击查看介绍) 的介绍, 它是通过使用另一个线程去回收内存,原理是先取消key与keyspace的连接,然后再异步删除键值对,这样就不会影响现有的Redis使用了

unlink命令在4.0.0版本之后可使用

redis-cli -h [ip] -p [port] -a [password] -n [index] --scan --pattern 'User:*' | xargs redis-cli -h [ip] -p [port] -a [password] -n [index] unlink

 

高并发不建议使用模糊匹配,毕竟是扫描全库的操作

采取空间换时间的方式去解决问题

 

如果帮到你,请点个赞吧 O(∩_∩)O~



【本文地址】


今日新闻


推荐新闻


CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3