Python Redis 缓存穿透的防御

小敏君_2650

小敏君_2650

2026-02-25

539人浏览

原创

缓存穿透是指高频查询根本不存在的key,导致请求直击数据库;典型表现是Redis get返回None且DB也无数据,需通过入口校验、空值标记(如"__NULL__")、布隆过滤器(限可枚举场景)等多层防御。

python redis 缓存穿透的防御

缓存穿透是什么,为什么 get 返回 None 就得警惕

缓存穿透本质是查一个**根本不存在的 key**,导致每次请求都击穿缓存直抵数据库。典型表现:Redis 里 get 返回 None,DB 查询也返回空,但请求量不小——说明有人在刷无效 ID(比如订单号、用户 ID),或接口被恶意探测。

关键不是“没数据”,而是“没数据还高频查”。不拦住它,DB 很快被拖慢甚至挂掉。

  • 常见错误现象:redis_client.get("user:999999999") 总是 None,日志里这类 key 出现频率远高于正常业务分布
  • 别只依赖「查完 DB 再写缓存」——如果 DB 也没查到,你又不写任何东西,下一次还是穿透
  • 注意区分缓存雪崩(大量 key 同时过期)和缓存击穿(单个热点 key 过期瞬间并发查询),穿透是「从不存在」,不是「曾经存在」

用布隆过滤器拦截非法 key,但别直接手写 BloomFilter

布隆过滤器(Bloom Filter)适合做「存在性预检」:如果它说“不存在”,那一定不存在;如果说“可能存在”,还得去 Redis 查。但它本身有误判率,且需要预加载全量合法 key——这在动态 ID 场景(如自增 ID、UUID)里根本不现实。

所以实际中,不要为所有业务 key 建布隆过滤器,而应该聚焦在「可枚举、有规律、易守门」的入口上:

  • 例如用户登录态校验:用 user_id 做布隆过滤前,先检查 token 是否格式合法、是否在有效期内——很多穿透请求连基础校验都过不去
  • 对订单号这种看似随机实则有规则的字段(如前缀+时间戳+序列),可用正则或前缀树快速 reject 明显非法格式(如 "order:abc123")
  • Python 里用 pybloom_live 或 bitarray 手写布隆过滤器容易误设容量/误差率,建议只在离线预热、ID 池固定场景用;线上服务优先用更轻量的方案

setex 存空值?小心缓存污染和 TTL 同步问题

最常用也最容易翻车的方案:DB 查无结果后,往 Redis 写一个空值 + 短 TTL,比如 setex("user:999999999", 60, "")。它能挡穿透,但副作用明显:

Python Pep Authoring
Python Pep Authoring

依据官方 python/peps仓库规则起草、审阅、编辑或准备 Python 改进提案(PEP),用于处理 PEP 文本和元数据头部。

下载
  • 如果业务逻辑把空字符串当有效值(比如某些字段允许为空),后续读到这个 "" 可能直接返回给前端,造成脏数据
  • TTL 设太短(如 10s)挡不住突发扫描;设太长(如 1h)又可能把刚注册的新用户卡住——他还没写 DB,你却已缓存了“不存在”
  • 多个服务共用一套缓存,A 服务写入空值,B 服务读到后可能误以为这是共识结果,不再走自己的兜底逻辑
  • 推荐做法:统一用特殊标记值,比如 setex("user:999999999", 60, "__NULL__"),读取时明确判断 if result == b"__NULL__": return None

用 pipeline 和 exists 减少穿透漏网,但别滥用 lua 脚本

单次请求里,如果要查多个 key(比如批量查用户信息),用 pipeline 批量执行 exists + get,比逐个 get 更高效,也能提前筛掉一批非法 key。

至于 Lua 脚本——它确实能原子性地完成「查缓存 → 查 DB → 写空值」,但要注意:

  • Redis 集群模式下,Lua 脚本里的 key 必须落在同一个 slot,否则报 CROSSSLOT 错误;用 {user:123} 这种标签方式强制路由,但会增加维护成本
  • 脚本逻辑复杂后难调试,出错时整个 pipeline 失败,反而不如 Python 层分步控制清晰
  • 真正需要原子性的场景其实不多:多数业务可以接受「短暂窗口内重复穿透」,只要 DB 有连接池限流 + 读写分离扛住压力即可

缓存穿透防御从来不是靠某一个开关解决的,而是层层设防:入口校验、参数归一化、空值标记策略、DB 查询限流——最常被忽略的是,压测时没模拟非法 key 流量,上线后才暴露。

Python免费学习笔记(深入):立即使用
在学习笔记中,你将探索 Python 的核心概念和高级技巧!

相关专题

更多
登录token无效
登录token无效

登录token无效解决方法:1、检查token的有效期限,如果token已经过期,需要重新获取一个新的token;2、检查token的签名,如果签名不正确,需要重新获取一个新的token;3、检查密钥的正确性,如果密钥不正确,需要重新获取一个新的token;4、使用HTTPS协议传输token,建议使用HTTPS协议进行传输 ;5、使用双因素认证,双因素认证可以提高账户的安全性。

2023.09.14

14726

6

登录token无效怎么办
登录token无效怎么办

登录token无效的解决办法有检查Token是否过期、检查Token是否正确、检查Token是否被篡改、检查Token是否与用户匹配、清除缓存或Cookie、检查网络连接和服务器状态、重新登录或请求新的Token、联系技术支持或开发人员等。本专题为大家提供token相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.14

1725

5

token怎么获取
token怎么获取

获取token值的方法:1、小程序调用“wx.login()”获取 临时登录凭证code,并回传到开发者服务器;2、开发者服务器以code换取,用户唯一标识openid和会话密钥“session_key”。想了解更详细的内容,可以阅读本专题下面的文章。

2023.12.21

4097

3

token什么意思
token什么意思

token是一种用于表示用户权限、记录交易信息、支付虚拟货币的数字货币。可以用来在特定的网络上进行交易,用来购买或出售特定的虚拟货币,也可以用来支付特定的服务费用。想了解更多token什么意思的相关内容可以访问本专题下面的文章。

2024.03.01

6261

5

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.03

1858

5

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.04

2964

5

java基础知识汇总
java基础知识汇总

java基础知识有Java的历史和特点、Java的开发环境、Java的基本数据类型、变量和常量、运算符和表达式、控制语句、数组和字符串等等知识点。想要知道更多关于java基础知识的朋友,请阅读本专题下面的的有关文章,欢迎大家来php中文网学习。

2023.10.24

6244

49

字符串介绍
字符串介绍

字符串是一种数据类型,它可以是任何文本,包括字母、数字、符号等。字符串可以由不同的字符组成,例如空格、标点符号、数字等。在编程中,字符串通常用引号括起来,如单引号、双引号或反引号。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

2023.11.24

6169

6

java读取文件转成字符串的方法
java读取文件转成字符串的方法

Java8引入了新的文件I/O API,使用java.nio.file.Files类读取文件内容更加方便。对于较旧版本的Java,可以使用java.io.FileReader和java.io.BufferedReader来读取文件。在这些方法中,你需要将文件路径替换为你的实际文件路径,并且可能需要处理可能的IOException异常。想了解更多java的相关内容,可以阅读本专题下面的文章。

2024.03.22

7754

16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程