如何利用rsyslog的scriptING扩展语法在日志落地前实现企业内部敏感用户信息的在线洗涤

云萱大大_7809

云萱大大_7809

2026-06-09

696人浏览

原创

最有效的方式是在rsyslog接收日志第一时间用rainerscript的re_replace()清洗$msg并覆盖写回;需rsyslog v8.33+,通过if+set精准定位、链式替换敏感字段,再用洁净$msg输出至文件模板,上线前须验证正则与性能。

如何利用rsyslog的scripting扩展语法在日志落地前实现企业内部敏感用户信息的在线洗涤

最有效的方式是在 rsyslog 接收日志的第一时间,用 RainerScript 的 re_replace() 对原始消息字段 $msg 做正则清洗,再覆盖写回——这能确保所有路径(包括异常日志、调试输出、旧版应用)中的敏感内容都被统一擦除,不依赖上游应用是否“自觉脱敏”。

确认rsyslog版本支持脚本脱敏能力

脱敏功能依赖 rsyslog v8.33 及以上版本,低版本(如 CentOS 7 默认的 8.24)不支持 re_replace() 和动态变量赋值。需执行以下命令验证:

  • rsyslogd -v 查看实际版本
  • 若低于 8.33,建议通过 EPEL 源升级,或从源码编译安装新版
  • 旧版仅支持模板级静态替换(如 %msg:R,REPLACE:...),无法处理 token=abc123、id_card=110101199001011234 这类动态值

在ruleset中用if+set完成精准定位与清洗

脱敏逻辑必须放在条件判断之后、落盘动作之前,且作用于 $msg 字段本身。典型结构如下:

Stable Doodle
Stable Doodle

Stable Doodle是一款AI图像与设计工具,StabilityAI 最新推出的将手绘草图转换为精美图像的工具。

下载
  • 用 if $programname == 'app-backend' or $msg contains 'user_id=' 锁定目标日志流
  • 调用 set $!sanitized = re_replace($msg, 'token=[^&\s]+', 'token=***');
  • 再执行 set $msg = $!sanitized; 覆盖原始消息($!xxx 是用户自定义变量,必须以 $! 开头)
  • 可链式叠加多条 re_replace(),例如同时处理手机号 phone=1[3-9]\d{9}、身份证号 id_card=\d{17}[\dXx]

绑定脱敏后消息到文件模板并落地

清洗完成后,$msg 已是洁净内容,后续只需按常规方式输出:

  • 定义模板时直接引用 property(name="msg"),无需二次处理
  • 示例模板:template(name="CleanLog" type="list") { property(name="timestamp") constant(" ") property(name="hostname") constant(" ") property(name="msg") }
  • 规则中调用:*.* action(type="omfile" file="/var/log/clean/app.log" template="CleanLog")
  • 切勿在模板里对 %msg% 做 REPLACE 或其他修饰——此时脱敏早已失效

上线前务必验证正则逻辑与性能影响

测试环节不可跳过,否则可能漏脱敏或引入 regex 错误导致日志丢失:

  • 用 logger "POST /login HTTP/1.1 User-Agent: curl token=xyz789 phone=13800138000" 发送测试日志
  • 检查目标文件是否输出为 POST /login... token=*** phone=***
  • 运行 journalctl -u rsyslog | grep "re_replace",确认无 invalid regex 报错
  • 单条日志脱敏耗时在微秒级,实测对万级 EPS 吞吐无明显延迟

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

2023.06.21

4210

4

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

2023.06.29

3553

10

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2023.06.30

2793

5

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

2023.07.05

6850

7

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

2023.07.06

6502

7

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.20

3733

8

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

2023.07.20

3245

4

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

2023.07.25

3459

6

linux查找文件命令
linux查找文件命令

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.31

297

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 134万人学习