Redis怎样通过脚本手动干预系统的内存淘汰_编写Lua脚本扫描并批量删除指定前缀的无用缓存数据

秋雪君_3502

秋雪君_3502

2026-05-08

424人浏览

原创

不能直接用 keys 因其阻塞主线程,易致服务卡顿甚至雪崩;应改用 scan 分批扫描,配合 lua 脚本实现前缀匹配与渐进式删除,客户端控制节奏、监控指标并动态调整。

redis怎样通过脚本手动干预系统的内存淘汰_编写lua脚本扫描并批量删除指定前缀的无用缓存数据

为什么不能直接用 KEYS 扫描前缀再删

Redis 的 KEYS 命令会阻塞主线程,单次扫描上万 key 就可能卡住几百毫秒,线上服务直接受影响。尤其在内存快满、淘汰策略已触发时,再加一个阻塞操作,容易引发雪崩。官方明确建议生产环境禁用 KEYS,改用 SCAN —— 它是渐进式、非阻塞的,但代价是需要客户端配合多次迭代。

如何用 Lua 脚本安全实现前缀批量删除

Lua 脚本在 Redis 中原子执行,但注意:它仍运行在单线程里,脚本内不能有耗时操作(比如循环上万次不做中断)。所以不能把整个前缀扫描+删除写死在一个脚本里。正确做法是分两步:先用 SCAN 拿一批 key,再用 DEL 批量删——这两步拆开,由客户端控制节奏。

  • 脚本只做「单次 SCAN + 匹配 + 返回匹配到的 key 列表」,不执行 DEL
  • 匹配逻辑用 string.match(key, "^" ..ARGV[1]..".*"),避免正则过度消耗(ARGV[1] 是传入的前缀)
  • 返回结果必须是数组(Lua table),Redis 才能转成 RESP 数组给客户端
  • 示例脚本:
    local prefix = ARGV[1]
    local cursor = tonumber(ARGV[2])
    local count = tonumber(ARGV[3]) or 100
    local keys = {}
    local new_cursor, batch = redis.call("SCAN", cursor, "MATCH", prefix.."*", "COUNT", count)
    for _, key in ipairs(batch) do
      if string.sub(key, 1, #prefix) == prefix then
        table.insert(keys, key)
      end
    end
    return {new_cursor, keys}

客户端怎么配合实现“手动干预内存淘汰”

所谓“手动干预”,本质是绕过 Redis 自动淘汰机制(如 allkeys-lru),主动清理已知无用数据。这要求你清楚哪些前缀属于可删范围(比如 cache:temp:、session:old:),且删除动作要可控、可中断、可监控。

Redis Skill - 高性能缓存管理
Redis Skill - 高性能缓存管理

Redis 缓存和数据结构管理技能。通过自然语言操作 Redis,支持 String、Hash、List、Set、ZSet、Stream 等数据结构操作。当用户提到 Redis、缓存、消息队列、会话存储时使用此技能。

下载
  • 每次调用脚本传入当前游标(初始为 0)、前缀、单次 scan 数量(建议 50–200)
  • 检查返回的 new_cursor:若为 "0",说明扫完;否则继续下一轮
  • 对每批返回的 key 列表,用 DEL 批量删除(一次最多 1000 个,避免命令包过大)
  • 每次操作后 sleep 几毫秒(如 5ms),减轻 Redis 压力,也方便随时中止
  • 记录删除总数和耗时,用于判断是否需调整扫描节奏

容易被忽略的边界问题

实际跑起来常踩的坑不在语法,而在语义和部署细节:

  • SCAN 不保证一次返回所有匹配 key,即使 MATCH 写对了,也可能漏掉——因为它是基于哈希桶的抽样扫描,必须循环到 cursor == 0 才算真正结束
  • 脚本里用 string.sub 而不用 string.match 做前缀判断,前者性能高一个数量级,且不会因特殊字符(如 .、*)误匹配
  • 如果目标 key 有设置过期时间(TTL),用 DEL 删除后,内存释放不是立即可见的——Redis 采用惰性删除+定期删除结合策略,INFO memory 中的 used_memory 可能延迟几秒才下降
  • 集群模式下,Lua 脚本中的 key 必须落在同一 slot,否则报 CROSSSLOT 错误;此时需确保前缀本身能哈希到固定 slot(如加 {xxx} 包裹),或改用客户端分片处理

真正难的不是写对脚本,而是判断“现在删多少、间隔多久、从哪开始停”——这些得结合当前 mem_used、evicted_keys、expired_keys 等指标动态决定,没法一劳永逸。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

redis

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.02

4529

19

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.14

4075

11

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.02

7572

6

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

643

6

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

756

6

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

7482

6

redis缓存一般存些什么数据
redis缓存一般存些什么数据

redis缓存中存储的数据类型包括:字符串、哈希、列表、集合、有序集合、位图、地理空间数据和hyperloglog。这些数据类型适用于存储各种数据,从简单信息到复杂对象和地理位置。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

1160

6

redis的8种数据类型有哪些
redis的8种数据类型有哪些

redis 提供 8 种数据类型:字符串(文本、数字、二进制)、哈希(键值对)、列表(有序集合)、集合(无序唯一元素)、有序集合(按分数排序)、地理空间(地理位置)、hyperloglog(估计大数据基数)和位图(位序列存储)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

1136

6

redis主要作用有哪些
redis主要作用有哪些

redis 的主要作用包括:1. 缓存数据,提高访问速度;2. 充当消息队列,实现消息传递;3. 存储各种数据类型,如字符串、散列和集合;4. 管理会话信息,确保可靠性和可用性;5. 限制请求速率,防止服务器超载等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

6538

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习