如何在Linux利用Shell的Bash内置BASH_REMATCH数组提取网络层流量日志中的关键黑客IP并注入动态黑名单

小晨姑娘_6383

小晨姑娘_6383

2026-06-05

598人浏览

原创

bash_rematch可用于精准提取日志中匹配攻击特征的ip并临时封禁,但仅适用于轻量分析或教学演示;生产环境应使用fail2ban、iptables+ipset等专业方案。

如何在linux利用shell的bash内置bash_rematch数组提取网络层流量日志中的关键黑客ip并注入动态黑名单

直接用 BASH_REMATCH 提取黑客IP并注入黑名单,**不推荐作为生产级防御手段**。它适合轻量日志分析、临时响应或教学演示,但无法替代专业IDS/防火墙(如fail2ban、iptables + ipset、nftables 或 Suricata)。下面给出一个**安全、可控、可验证的 Bash 实现思路**,聚焦“从日志中提取疑似攻击IP → 去重 → 临时封禁”,全程避免误杀和权限失控。

一、前提:确认日志格式与攻击特征

典型网络层日志(如 nginx access.log、tcpdump -r 输出、或自定义审计日志)需含 IP 字段,且有可识别的恶意行为线索,例如:

  • 高频 404/403 请求(扫描路径)
  • POST /wp-login.php 多次失败(爆破)
  • User-Agent 含 sqlmap、nikto、wget -r 等工具标识
  • 单 IP 短时大量连接(需配合 conntrack 或 netstat 辅助判断)

⚠️ 注意:仅靠 IP 出现频次不能等同于“黑客”,必须结合上下文规则。以下以 nginx 日志中“10秒内发起 ≥5 次 /admin/login 的 POST 请求”为例。

二、用 grep + sed + BASH_REMATCH 提取匹配IP

BASH_REMATCH 是 [[ string =~ regex ]] 成功后自动填充的数组,BASH_REMATCH[0] 是完整匹配,[1], [2]… 是捕获组。关键在于写准正则并提取 IP:

# 示例:从 nginx 日志行中提取满足条件的源IP
while IFS= read -r line; do
  # 匹配形如 '192.168.1.123 - - [10/Jul/2024:14:22:35 ...] "POST /admin/login HTTP/1.1" 401'
  if [[ $line =~ ([0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}).*\"POST[[:space:]]+/admin/login[[:space:]]+HTTP ]]; then
    ip="${BASH_REMATCH[1]}"
    # 验证IP格式(防正则误匹配)
    if [[ $ip =~ ^([0-9]{1,3}\.){3}[0-9]{1,3}$ ]] && 
       [[ ${BASH_REMATCH[1]/#/} == ${BASH_REMATCH[1]} ]]; then
      echo "$ip"
    fi
  fi
done <p>? 提示:用 <code>grep -Eo '([0-9]{1,3}\.){3}[0-9]{1,3}'</code> 更快,但 <code>BASH_REMATCH</code> 的优势在于能同时校验请求方法、路径、状态码等多条件,避免单纯IP提取的噪声。</p><div class="aritcle_card flexRow artxards">
											<div class="artcardd flexRow">
												<a class="aritcle_card_img" rel="nofollow" href="/xiazai/skill7940" title="Zynq Linux Hardware Debug"><img
														src="https://img.php.cn/upload/skill/000/000/081/179177762288958.jpg" alt="Zynq Linux Hardware Debug" onerror="this.onerror='';this.src='/static/lhimages/moren/morentu.png'" ></a>
												<div class="aritcle_card_info flexColumn">
													<a rel="nofollow" href="/xiazai/skill7940" title="Zynq Linux Hardware Debug" class="overflowclass">Zynq Linux Hardware Debug</a>
													<p class="overflowclass">Zynq‑7000 / Zynq UltraScale+ 硬件调试技能。适用于 Xilinx Zynq(Cortex‑A9/A53 + FPGA)Linux 环境,调试 I2C、I2S、UART、GPIO 等外设。包括设备树配置、内核驱动、用户空间调试工具、交叉编译和常见问题排查,支持 PetaLinux 开发。</p>
												</div>
												<a rel="nofollow" href="/xiazai/skill7940" title="Zynq Linux Hardware Debug" class="aritcle_card_btn flexRow flexcenter"><b></b><span>下载</span>
												</a>
											</div>
										</div><h3>三、去重计数 + 动态生成黑名单(内存级)</h3><p>不直接封禁每个匹配IP,而是统计频次,只处理超过阈值的IP(如 5 次/60秒):</p><pre class="brush:php;toolbar:false;"># 统计最近1分钟内高危请求IP(需日志带时间戳)
awk -v cutoff="$(date -d '1 minute ago' '+%d/%b/%Y:%H:%M:%S')"' 
  '$4 > "["cutoff { print $1 }' /var/log/nginx/access.log | \
  sort | uniq -c | sort -nr | awk '$1 >= 5 {print $2}'

得到 IP 列表后,用 Bash 数组暂存,避免重复操作:

declare -A blacklist
while read -r ip; do
  [[ -n "$ip" ]] && blacklist["$ip"]=1
done 输出待封IP(调试用)<p>echo "Found malicious IPs:"
printf '%s\n' "${!blacklist[@]}"</p>

四、安全注入黑名单(推荐 iptables + ipset)

直接用 iptables -A INPUT -s x.x.x.x -j DROP 效率低且难管理。更合理的方式是:

  • 先确保 ipset 已安装:sudo apt install ipset(Debian)或 yum install ipset(RHEL)
  • 创建 hash:ip 类型集合:sudo ipset create hackips hash:ip timeout 3600(自动过期1小时)
  • 批量添加(原子操作,无中间开放窗口):printf '%s\n' "${!blacklist[@]}" | sudo ipset restore -!(需先用 ipset save 构造 restore 格式,或逐条 add)
  • 最后一条 iptables 规则匹配该集合:sudo iptables -I INPUT -m set --match-set hackips src -j DROP

✅ 这样做:封禁实时生效、可查可删(ipset list hackips)、不污染主规则链、超时自动清理。

真正对抗自动化攻击,应结合 fail2ban(内置正则+封禁+解封+邮件通知),而 Bash 脚本更适合做“离线日志巡检”或“应急快照封禁”。把 BASH_REMATCH 当作精准提取器,而非防御引擎本身——它强大,但只是工具链里的一颗螺丝。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

linux 黑名单

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
C语言变量命名
C语言变量命名

c语言变量名规则是:1、变量名以英文字母开头;2、变量名中的字母是区分大小写的;3、变量名不能是关键字;4、变量名中不能包含空格、标点符号和类型说明符。php中文网还提供c语言变量的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

3249

3

c语言入门自学零基础
c语言入门自学零基础

C语言是当代人学习及生活中的必备基础知识,应用十分广泛,本专题为大家c语言入门自学零基础的相关文章,以及相关课程,感兴趣的朋友千万不要错过了。

2023.07.25

2348

9

c语言运算符的优先级顺序
c语言运算符的优先级顺序

c语言运算符的优先级顺序是括号运算符 > 一元运算符 > 算术运算符 > 移位运算符 > 关系运算符 > 位运算符 > 逻辑运算符 > 赋值运算符 > 逗号运算符。本专题为大家提供c语言运算符相关的各种文章、以及下载和课程。

2023.08.02

1280

5

c语言数据结构
c语言数据结构

数据结构是指将数据按照一定的方式组织和存储的方法。它是计算机科学中的重要概念,用来描述和解决实际问题中的数据组织和处理问题。数据结构可以分为线性结构和非线性结构。线性结构包括数组、链表、堆栈和队列等,而非线性结构包括树和图等。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.09

1218

4

c语言random函数用法
c语言random函数用法

c语言random函数用法:1、random.random,随机生成(0,1)之间的浮点数;2、random.randint,随机生成在范围之内的整数,两个参数分别表示上限和下限;3、random.randrange,在指定范围内,按指定基数递增的集合中获得一个随机数;4、random.choice,从序列中随机抽选一个数;5、random.shuffle,随机排序。

2023.09.05

1376

5

c语言const用法
c语言const用法

const是关键字,可以用于声明常量、函数参数中的const修饰符、const修饰函数返回值、const修饰指针。详细介绍:1、声明常量,const关键字可用于声明常量,常量的值在程序运行期间不可修改,常量可以是基本数据类型,如整数、浮点数、字符等,也可是自定义的数据类型;2、函数参数中的const修饰符,const关键字可用于函数的参数中,表示该参数在函数内部不可修改等等。

2023.09.20

2218

7

c语言get函数的用法
c语言get函数的用法

get函数是一个用于从输入流中获取字符的函数。可以从键盘、文件或其他输入设备中读取字符,并将其存储在指定的变量中。本文介绍了get函数的用法以及一些相关的注意事项。希望这篇文章能够帮助你更好地理解和使用get函数 。

2023.09.20

3560

8

c数组初始化的方法
c数组初始化的方法

c语言数组初始化的方法有直接赋值法、不完全初始化法、省略数组长度法和二维数组初始化法。详细介绍:1、直接赋值法,这种方法可以直接将数组的值进行初始化;2、不完全初始化法,。这种方法可以在一定程度上节省内存空间;3、省略数组长度法,这种方法可以让编译器自动计算数组的长度;4、二维数组初始化法等等。

2023.09.22

16295

6

c语言中null和NULL的区别
c语言中null和NULL的区别

c语言中null和NULL的区别是:null是C语言中的一个宏定义,通常用来表示一个空指针,可以用于初始化指针变量,或者在条件语句中判断指针是否为空;NULL是C语言中的一个预定义常量,通常用来表示一个空值,用于表示一个空的指针、空的指针数组或者空的结构体指针。

2023.09.22

549

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习