怎么在Linux利用Ipset管理海量黑名单IP池实现防火墙规则匹配速度的指数级提升

陌晨吖_5057

陌晨吖_5057

2026-05-01

540人浏览

原创

ipset通过哈希表实现o(1)查表,显著优于iptables线性匹配的o(n)复杂度;需显式设置maxelem防溢出,批量导入优先使用restore命令,动态更新应采用swap原子切换。

怎么在linux利用ipset管理海量黑名单ip池实现防火墙规则匹配速度的指数级提升

直接用 iptables -A 加上万条 -s IP -j DROP 规则,匹配速度会断崖式下跌,因为规则链是线性结构,每次查包都要逐条比对,复杂度是 O(n)。而 ipset 把 IP 列表转成内核级哈希表,iptables 只需一次查表,复杂度接近 O(1),10 万条和 100 万条几乎没差别。

选对类型和参数,避免运行时崩溃

hash:ip 和 hash:net 是最常用也最高效的两类,但不能混用:

  • 封单个 IPv4 地址,用 hash:ip:内存低、插入快,命令如 ipset create blackv4 hash:ip maxelem 1200000 hashsize 16384
  • 封网段(比如 /24、/16),必须用 hash:net:它原生支持 CIDR,hash:ip 对 192.168.1.0/24 这类会报错
  • maxelem 必须显式设大:默认仅 65536,超限直接报 “Set is full”,建议按峰值上浮 20%
  • hashsize 设为略大于 maxelem 的 2 的幂(如 8192、16384),能显著减少哈希冲突,提升命中率

批量导入不走 shell 循环,改用 restore

用 while read ip; do ipset add blackv4 $ip; done 导入 10 万行,实际要启动 10 万个进程,几分钟都跑不完,还容易中断失败。

Linux Distros
Linux Distros

Linux发行版游乐场,适用于需要临时Linux沙箱、基于浏览器的Linux虚拟机、一次性终端环境、桌面Linux会话等场景

下载
  • 正确做法是生成标准 restore 文件,例如 blacklist.ipset 内容为:

create blackv4 hash:ip maxelem 1200000
add blackv4 1.1.1.1
add blackv4 2.2.2.2
add blackv4 192.168.1.0/24

  • 执行 ipset restore -f blacklist.ipset,百万条秒级完成
  • 原始列表是纯 IP 文本?用 awk '{print "add blackv4 " $1}' list.txt > blacklist.ipset 一键转换
  • 导入前确保集合未被 iptables 引用,否则 restore 会失败;可先临时删规则:iptables -D INPUT -m set --match-set blackv4 src -j DROP

iptables 引用要准,位置和模块一个都不能少

集合建好了,但规则写错就完全不生效,常见硬伤有三个:

  • 必须加载 -m set 模块,漏掉就报 “No chain/target/match by that name”
  • 规则必须插在链首:iptables -I INPUT,不能用 -A 追加;若前面已有 -j ACCEPT,DROP 规则永远轮不到执行
  • IPv4 集合(hash:ip / hash:net)只匹配 IPv4 流量,封 IPv6 要另建 hash:ip6 集合并加独立规则

动态更新不丢包,靠 swap 原子切换

直接 ipset flush blackv4 && ipset restore 会在清空瞬间放行所有黑名单 IP,形成安全窗口。

  • 正确方式是维护两个集合:blackv4(线上生效)和 blackv4_new(后台构建)
  • 新名单准备就绪后,执行 ipset swap blackv4 blackv4_new,毫秒级切换,无连接中断
  • 切完立刻 ipset destroy blackv4_new 释放内核内存,否则残留空集合仍占资源
  • swap 前确认两个集类型一致,否则报 “Set cannot be swapped: different types”

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

linux 防火墙 黑名单

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

2023.06.21

3950

4

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

2023.06.29

3393

10

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2023.06.30

2553

5

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

2023.07.05

6170

7

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

2023.07.06

5802

7

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.20

3393

8

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

2023.07.20

2905

4

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

2023.07.25

3119

6

linux查找文件命令
linux查找文件命令

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.31

297

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习