Nginx Referer 限制中怎么通过脚本定时分析访问日志并自动将盗链 IP 加入 Nginx 黑名单

舞姬之光

舞姬之光

2026-07-29

818人浏览

原创

nginx 通过 geo + map + if 实现动态 ip 黑名单自动封禁,配合定时脚本分析 access.log 中非法 referer 和静态资源请求,提取高频盗链 ip 写入黑名单文件并重载生效,无需重启、安全高效。

nginx referer 限制中怎么通过脚本定时分析访问日志并自动将盗链 ip 加入 nginx 黑名单

直接通过 Nginx 的 valid_referers 只能做简单 Referer 白名单校验,无法自动封禁盗链 IP。真要实现“定时分析日志 + 自动拉黑”,得靠外部脚本配合 Nginx 的 geo + map + deny 机制,而不是用 ngx_http_access_module 的静态 deny 规则硬写配置文件。

核心思路:用 geo 模块动态加载黑名单

Nginx 不支持运行时 reload 单条 deny 规则,但支持通过 geo 指令从外部文件读取 IP 映射关系,再用 map 转成变量,最后在 server 或 location 块里用 if ($bad_ip) { return 403; } 控制。这样只需重载(不重启)Nginx 就生效,安全又高效。

  • 准备一个纯文本黑名单文件,如 /usr/local/nginx/conf/ip_blacklist.conf,每行一个 IP 或 CIDR(如 192.168.1.100203.205.0.0/16
  • http 块中定义:
    geo $bad_ip {
      default 0;
      include /usr/local/nginx/conf/ip_blacklist.conf;
    }
  • 再加一条 map 把数值转为布尔(可选,便于 if 判断):
    map $bad_ip $is_blocked { default ""; 1 "1"; }
  • 在需要防护的 location 中加入:
    if ($is_blocked) { return 403; }

怎么从日志识别盗链 IP?关键看 Referer 和资源路径

盗链请求通常满足两个特征:Referer 不在白名单内 + 请求的是图片、CSS、JS 等静态资源。不要只盯 Referer 字段是否为空(空 Referer 可能是直接访问或 HTTPS 跳转),而要匹配你允许的域名(比如只允许 your-site.comwww.your-site.com)。

Nginx
Nginx

在宝塔面板中轻松管理Nginx高性能Web服务器。提供可视化配置反向代理、负载均衡、SSL证书及HTTP缓存功能,一键优化高并发性能,助您高效搭建稳定、快速的网站运行环境。

下载
  • 用 awk/grep 提取近 24 小时内,Referer 非你域名、且请求后缀为 .jpg .png .webp .css .js 的记录
  • 统计每个 IP 出现次数,过滤掉高频(比如 ≥ 50 次)或异常 UA(如空 UA + 大量图片请求)
  • 排除已知 CDN、爬虫 UA(如 Cloudflare、BaiduSpider),避免误杀
  • 示例命令片段:
    awk '$NF ~ /\.(jpg|jpeg|png|webp|css|js)$/ && $11 !~ /"-(https?:\/\/)?(www\.)?your-site\.com/' /var/log/nginx/access.log | awk '{print $1}' | sort | uniq -c | awk '$1 >= 50 {print $2}'

定时脚本:分析 + 去重 + 写入 + 重载

把上面逻辑封装成 shell 脚本(比如 /opt/nginx-block/update_blacklist.sh),用 crontab 每小时跑一次:

  • 先备份旧黑名单:cp /usr/local/nginx/conf/ip_blacklist.conf /usr/local/nginx/conf/ip_blacklist.conf.bak
  • 生成新 IP 列表(含去重、排除内网、排除已存在条目):
    awk ...(上一步命令)... | grep -vE '^(10|172\.(1[6-9]|2[0-9]|3[0-1])|192\.168)\.' | sort -u > /tmp/new_blacklist.tmp
  • 合并旧名单(保留人工添加的)和新名单,去重后写入:
    cat /usr/local/nginx/conf/ip_blacklist.conf /tmp/new_blacklist.tmp | sort -u | grep -v "^#" > /usr/local/nginx/conf/ip_blacklist.conf
  • 语法检查并重载:
    nginx -t && nginx -s reload

补充建议:避免误封 & 降低干扰

全自动拉黑容易伤及无辜,尤其对搜索引擎、RSS 阅读器或某些合法聚合站。建议加几道缓冲:

  • 新发现 IP 先写入临时观察名单,连续 3 次触发才正式加入黑名单
  • 黑名单文件开头加注释说明生成时间,方便人工审计:# Auto-generated at $(date -Iseconds)
  • 给被封 IP 返回 403 时,加个简短提示页(用 error_page 403 /403.html),避免用户以为网站挂了
  • 定期清理过期黑名单(比如 7 天无请求的 IP 自动移除),可用另一个脚本配合 access.log 时间戳做归档清理

这套方案不依赖第三方模块,纯靠 Nginx 原生能力 + 标准 Linux 工具,稳定、轻量、易维护。关键是把“判断逻辑”交给脚本,“执行控制”交给 Nginx 的 geo 模块,分工清晰,不会因频繁 reload 导致连接中断。

相关专题

更多
nginx 重启
nginx 重启

nginx重启对于网站的运维来说是非常重要的,根据不同的需求,可以选择简单重启、平滑重启或定时重启等方式。本专题为大家提供nginx重启的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.27

339

5

nginx 配置详解
nginx 配置详解

Nginx的配置是指设置和调整Nginx服务器的行为和功能的过程。通过配置文件,可以定义虚拟主机、HTTP请求处理、反向代理、缓存和负载均衡等功能。Nginx的配置语法简洁而强大,允许管理员根据自己的需要进行灵活的调整。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

1728

6

nginx配置详解
nginx配置详解

NGINX与其他服务类似,因为它具有以特定格式编写的基于文本的配置文件。本专题为大家提供nginx配置相关的文章,大家可以免费学习。

2023.08.04

2125

6

tomcat和nginx有哪些区别
tomcat和nginx有哪些区别

tomcat和nginx的区别:1、应用领域;2、性能;3、功能;4、配置;5、安全性;6、扩展性;7、部署复杂性;8、社区支持;9、成本;10、日志管理。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.02.23

416

5

nginx报404怎么解决
nginx报404怎么解决

当访问 nginx 网页服务器时遇到 404 错误,表明服务器无法找到请求资源,可以通过以下步骤解决:1. 检查文件是否存在且路径正确;2. 检查文件权限并更改为 644 或 755;3. 检查 nginx 配置,确保根目录设置正确、没有冲突配置等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.07.09

1244

5

Nginx报404错误解决方法
Nginx报404错误解决方法

解决方法:只需要加上这段配置:try_files $uri $uri/ /index.html;即可。想了解更多Nginx的相关内容,可以阅读本专题下面的文章。

2024.08.07

3809

3

nginx部署php项目教程汇总
nginx部署php项目教程汇总

本专题整合了nginx部署php项目教程汇总,阅读专题下面的文章了解更多详细内容。

2026.01.13

102

12

nginx配置文件详细教程
nginx配置文件详细教程

本专题整合了nginx配置文件相关教程详细汇总,阅读专题下面的文章了解更多详细内容。

2026.01.13

272

23

Nginx跨平台安装实操指南:Windows、macOS与Linux环境快速搭建
Nginx跨平台安装实操指南:Windows、macOS与Linux环境快速搭建

本指南详解Nginx在Windows、macOS及Linux系统的安装全流程。涵盖官方包解压、Homebrew一键部署、APT/YUM源配置及Docker容器化方案。无论新手或开发者,均可快速搭建运行环境,掌握跨平台核心指令,为后续配置与调优奠定坚实基础。

2026.03.16

107

12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

nginx手册
nginx手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习