如何利用Redis Streams监控异常高频查询以及时拦截穿透攻击?

浅丽酱_3153

浅丽酱_3153

2026-11-12

947人浏览

原创

Redis Streams 不用于实时拦截穿透,而是记录请求行为供归因分析与策略触发;需配合外部服务实现熔断或封禁,XADD/XTRIM 构建低开销日志流水线,按 IP 和 key 字段聚合识别穿透特征。

如何利用redis streams监控异常高频查询以及时拦截穿透攻击?

Redis Streams 本身不直接用于拦截穿透,而是做异常行为归因与策略触发

Streams 不是限流或过滤组件,它不能替代布隆过滤器或滑动窗口限流。它的价值在于:把“谁在查什么、查了多少次、时间戳精确到毫秒”这些原始行为落盘,供后续分析或联动其他防护模块。一旦发现某 IP 在 10 秒内对 user:-1、sku:999999999 这类明显非法 key 发起 200+ 次查询,就可以触发熔断或加入黑名单——但这个判断逻辑必须由外部服务(如网关、风控系统)完成,不能指望 Streams 自己拦。

用 XADD + XTRIM 构建低开销的请求日志流水线

别用 LPUSH 或 SET 存日志:它们不支持自动过期、无时间序、难做范围查询。Streams 天然带时间戳和自动分片能力,适合长期轻量记录。

  • XADD 写入时必须显式传入毫秒级时间戳(* 会用服务器本地时间,跨节点可能错乱),例如:XADD req_log * ip 192.168.1.100 key user:999999999 ts 1729395240123
  • XTRIM 要设最大长度而非过期时间(Streams 无 TTL),比如 XTRIM req_log MAXLEN 10000,避免无限增长;若需按时间清理,得靠外部定时任务扫描 XRANGE + XDEL
  • 不要为每个请求建独立 Stream,统一用一个 req_log,靠 ip 和 key 字段过滤,否则 10 万 IP 就产生 10 万 key,运维爆炸

结合 XRANGE + 客户端聚合识别穿透特征

单纯看单条日志没意义,关键是从 Streams 里捞出“高频查非法 key”的模式。典型穿透特征是:同一 IP 对不同但格式可疑的 key(如全数字超长、负值、含 SQL 片段)在短时间密集请求。

Sentinal Redis
Sentinal Redis

监控Redis服务器健康状况、内存、性能及BullMQ队列。检查队列深度、失败任务,分析慢查询并诊断问题。

下载
  • 用 XRANGE req_log - + COUNT 1000 拉最近 1000 条,客户端按 ip 分组,再按 key 做正则匹配(如 ^user:-?\d{6,}$)统计频次
  • 避免在 Redis 里用 KEYS 或 SCAN 查 Stream,它不支持模糊匹配字段值;所有条件过滤必须拉到应用层做
  • 如果日志量大(>10k QPS),别实时扫整个 Stream,改用 XREAD 长轮询 + 游标位移,配合内存 LRU 缓存最近 5 分钟的 IP-key 组合计数

真正拦截动作必须落在网关或中间件,不能依赖 Redis 响应延迟

从 Streams 发现异常到执行拦截,链路至少经过:Redis → 应用服务 → 网关配置更新 → 生效。这中间有几百毫秒延迟,根本挡不住穿透洪峰。所以 Streams 只能用于事后溯源、策略调优和批量封禁,不能当实时防火墙。

  • 实时拦截必须前置:布隆过滤器在 Nginx/Lua 或 Spring Boot HandlerInterceptor 里校验,user_id 连 Redis 连接都不该建立
  • Streams 日志唯一能做的实时联动,是让网关定期(如每 5 秒)拉取最新异常 IP 列表,写入本地缓存,然后在请求入口做 if ip in blocked_ips 判断
  • 注意客户端时间戳精度:若业务用秒级时间戳写入 Streams,XRANGE 拉不到毫秒级攻击节奏,误判率会升高

实际部署中最容易被忽略的一点:Streams 的 MAXLEN 是按条数截断,不是按时间。如果你设了 MAXLEN 10000,但流量低谷期一小时才写 100 条,那这条日志就存了一小时;高峰期一秒写 1000 条,10 秒就刷没了。想按时间保留,必须自己维护索引或换用 RedisTimeSeries。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

redis stream redis stream

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.02

4929

19

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.14

4495

11

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.02

8712

6

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

683

6

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

776

6

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

9042

6

redis缓存一般存些什么数据
redis缓存一般存些什么数据

redis缓存中存储的数据类型包括:字符串、哈希、列表、集合、有序集合、位图、地理空间数据和hyperloglog。这些数据类型适用于存储各种数据,从简单信息到复杂对象和地理位置。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

1200

6

redis的8种数据类型有哪些
redis的8种数据类型有哪些

redis 提供 8 种数据类型:字符串(文本、数字、二进制)、哈希(键值对)、列表(有序集合)、集合(无序唯一元素)、有序集合(按分数排序)、地理空间(地理位置)、hyperloglog(估计大数据基数)和位图(位序列存储)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

1456

6

redis主要作用有哪些
redis主要作用有哪些

redis 的主要作用包括:1. 缓存数据,提高访问速度;2. 充当消息队列,实现消息传递;3. 存储各种数据类型,如字符串、散列和集合;4. 管理会话信息,确保可靠性和可用性;5. 限制请求速率,防止服务器超载等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

7718

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习