如何通过Nginx网关实现动态黑名单同步至Redis集群

梦芳同学_7139

梦芳同学_7139

2026-04-07

605人浏览

原创

Nginx动态黑名单同步Redis集群采用“中心化存储+本地缓存+变更通知”架构:Redis集群为权威存储,Nginx用shared dict本地缓存并定期刷新,后端服务接收HTTP更新、写入Redis并广播通知,确保多实例视图一致。

如何通过nginx网关实现动态黑名单同步至redis集群

通过 Nginx 网关实现动态黑名单同步至 Redis 集群,核心在于:Nginx 侧实时拦截请求并查询黑名单,同时提供外部接口(如 HTTP API)接收运营或风控系统下发的黑名单变更,并将变更广播/写入 Redis 集群,确保多节点 Nginx 实例共享一致的黑名单视图。

1. 架构设计要点

需避免单点瓶颈和数据不一致。推荐采用「中心化存储 + 本地缓存 + 变更通知」模式:

  • Redis 集群作为权威黑名单存储:所有黑名单条目(如 IP、UID、Token)以 SET 或 HASH 结构存于 Redis,支持 TTL 自动过期
  • Nginx 每个实例本地缓存(shared dict)定期刷新:减少对 Redis 的高频直连,提升拦截性能
  • 统一的黑名单管理服务(如 Go/Python 后端)负责写入与广播:接收 HTTP POST 请求,写入 Redis,并可选通过 Redis Pub/Sub 或消息队列通知各 Nginx 实例主动 reload 缓存

2. Nginx 侧黑名单校验(使用 lua-resty-redis + shared dict)

在 nginx.conf 的 http 块中定义共享字典,并在 access_by_lua_block 中拦截:

lua_shared_dict blacklisted_ips 10m;
upstream redis_backend {
    server 192.168.1.10:6379;
    server 192.168.1.11:6379;
    # 使用 redis-cluster 模式需配合 lua-resty-redis-cluster
}

在 location 中添加 Lua 校验逻辑:

access_by_lua_block {
    local dict = ngx.shared.blacklisted_ips
    local ip = ngx.var.remote_addr
    local now = ngx.now()
<pre class="brush:php;toolbar:false;">-- 先查本地缓存
local cached = dict:get(ip)
if cached == 1 then
    return ngx.exit(403)
elseif cached == 0 then
    -- 缓存标记为“不存在”,跳过 Redis 查询(防穿透)
    return
end

-- 缓存未命中,查 Redis(建议用连接池)
local redis = require "resty.redis"
local red = redis:new()
red:set_timeout(100)
red:connect("192.168.1.10", 6379)

local ok, err = red:sismember("blacklist:ip", ip)
if ok == 1 then
    dict:set(ip, 1, 30)  -- 缓存 30 秒,防止重复查
    return ngx.exit(403)
elseif ok == 0 then
    dict:set(ip, 0, 30)  -- 显式缓存“不在黑名单”
end

}

3. 黑名单动态更新与集群同步

提供一个管理接口(如 /api/v1/blacklist/update),由运维平台调用:

  • 接收 JSON 如 {"type":"ip","value":"192.168.5.100","ttl":3600}
  • 后端服务写入 Redis:SADD blacklist:ip "192.168.5.100" + EXPIRE blacklist:ip 3600(或用 SET blacklist:ip:192.168.5.100 1 EX 3600 避免大 SET 膨胀)
  • 为触发 Nginx 缓存刷新,可:
      • 发送 Pub/Sub 消息到 channel:blacklist:refresh,各 Nginx 实例用 redis:subscribe 监听并清空对应 key 缓存
      • 或调用 Nginx 内部 API(如 openresty 的 ngx.location.capture)触发 reload 逻辑
      • 更轻量做法:让 Nginx 定期(如每 10 秒)用 dict:flush_all() 或按前缀清理过期缓存

4. 注意事项与优化建议

实际落地时需关注稳定性与扩展性:

  • 避免 Redis 单点故障:使用 Redis Cluster 或哨兵模式,Lua 脚本需适配重试逻辑
  • 黑名单结构选型:高频查 IP 推荐用 SET;若需携带元数据(如封禁原因、时间),改用 HASH(HSET blacklist:ip 192.168.5.100 '{"reason":"scan","at":1717023456}')
  • 防止缓存雪崩:为 shared dict 设置随机 TTL(如 25–35 秒),而非统一值
  • 支持批量操作:管理接口应支持数组传入,后端用 pipeline 批量写入 Redis,降低 RT
  • 可观测性:记录拦截日志(log_by_lua)、Redis 查询耗时、缓存命中率,便于排查漏拦/误拦

不复杂但容易忽略:Nginx worker 进程间 shared dict 不互通,必须依赖中心化 Redis 保证全局一致性;而本地缓存只是性能优化层,不能替代 Redis 的权威性。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
服务器是什么
服务器是什么

服务器是一种计算机硬件设备或软件程序,它具有强大的计算和存储能力,用请求、存储数据和提供服务。它在互联网中着关重要的作用,为用户提供各种服务和资源。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.15

457

5

连接apple id服务器时出错
连接apple id服务器时出错

连接apple id服务器时出错的原因包括网络连接问题、服务器问题、Apple ID账户问题、设备问题、防火墙或安全软件问题、时间和日期设置问题、Apple服务器维护等。本专题为大家提供apple id相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.08

960

5

搭建互联网服务器
搭建互联网服务器

搭建互联网服务器需要:1、选择合适的硬件和操作系统,第一步是选择合适的硬件和操作系统;2、安装和配置操作系统,是搭建互联网服务器的关键步骤;3、安装和配置服务器软件,是搭建互联网服务器的下一步,常见的服务器软件包括Apache、Nginx、Tomcat等;4、配置防火墙和安全性,是搭建互联网服务器的重要步骤;5、域名解析和配置,是搭建互联网服务器的最后一步。

2023.09.19

3172

5

如何查看服务器状态
如何查看服务器状态

查看服务器状态的方法有使用命令行工具、图形界面工具、监控工具、日志文件和远程管理工具等。本专题为大家提供服务器状态相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.09

1056

5

服务器域名转接慢怎么解决
服务器域名转接慢怎么解决

服务器域名转接慢的解决办法有DNS优化、服务器优化、CDN加速、前端优化和网络优化等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.17

929

5

服务器评测软件
服务器评测软件

服务器评测软件有PassMark Software、CPU-Z、GPU-Z、CrystalDiskMark、IOmeter、JMeter、LoadRunner、Apache Bench等等。详细介绍:1、PassMark Software是一款综合性的服务器性能测试软件,可以评估服务器在各种负载条件下的性能;2、CPU-Z是一款可以提供服务器CPU详细信息的软件等等。

2023.10.17

494

3

如何开启TFTP服务器
如何开启TFTP服务器

开启TFTP服务器的步骤包括选择TFTP服务器软件、下载和安装软件、配置TFTP服务器以及启动和测试服务器等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.18

2896

4

服务器负载不兼容怎么解决
服务器负载不兼容怎么解决

解决方法:1、增加服务器资源;2、负载均衡;3、优化应用程序;4、增加缓存机制;5、分布式架构;6、限流和熔断;7、自动化扩容。想知道更详细服务器负载不兼容的解决方法,可以访问本专题下面的文章。

2023.10.20

5432

4

宽带如何接入服务器
宽带如何接入服务器

宽带接入服务器的方法有ADSL宽带接入服务器、光纤接入服务器、无线接入服务器和以太网接入服务器等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.20

847

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 134万人学习