【Redis实战】批量模糊删除(适用生产环境) |
您所在的位置:网站首页 › redis脚本删除大量数据 › 【Redis实战】批量模糊删除(适用生产环境) |
目前在网上看到的大部分文章都是通过keys 进行模糊匹配并删除的 下面介绍3种删除方法,建议使用linux去操作,可以结合 xargs(点击查看介绍) 命令进行操作 参数说明: [ip]: ip地址, 参数名 -> -h [port]: 端口号, 参数名 -> -p [password]: 密码, 参数名 -> -a, 没有密码则不输入 -a [password] [index]: 缓存所在的库, 参数名 -> -nkeys命令 它会扫整个库,导致Redis阻塞,影响正常使用, 不建议使用 redis-cli -h [ip] -p [port] -a [password] -n [index] keys "User:*" | xargs redis-cli -h [ip] -p [port] -a [password] -n [index] del这是目前网上常用的方法,通过keys 命令返回匹配到的key,然后再使用 xargs整合所有的并删除 但是这个方法有个致命的问题,就是它是通过keys去扫描模糊匹配,keys命令会导致Redis阻塞问题,并且keys命令在生产环境是禁用的 scan命令它是通过游标的方式扫描 (推荐) redis-cli -h [ip] -p [port] -a [password] -n [index] --scan --pattern 'User:*' | xargs redis-cli -h [ip] -p [port] -a [password] -n [index] del但是这个删除又有个可以忽略不计的小问题,就是它其实是通过xargs整合所有匹配到的key然后再通过del命令去删除的 虽然del命令是O(1)的时间复杂度,但是在大量删除key的情况下还是会有很微乎其微的效率问题,所以才会说可以忽略不计的小问题 scan + unlink 命令 墙裂推荐 关于unlink(点击查看介绍) 的介绍, 它是通过使用另一个线程去回收内存,原理是先取消key与keyspace的连接,然后再异步删除键值对,这样就不会影响现有的Redis使用了 unlink命令在4.0.0版本之后可使用 redis-cli -h [ip] -p [port] -a [password] -n [index] --scan --pattern 'User:*' | xargs redis-cli -h [ip] -p [port] -a [password] -n [index] unlink
高并发不建议使用模糊匹配,毕竟是扫描全库的操作 采取空间换时间的方式去解决问题
|
今日新闻 |
推荐新闻 |
CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3 |