如何利用rsyslog的mmpstrucdata模块深度解析复杂RFC5424规范的结构化安全syslog

浅丽同学_4643

浅丽同学_4643

2026-05-30

667人浏览

原创

rsyslog 不存在名为 mmpstrucdata 的官方模块;实际处理 RFC 5424 结构化数据需加载 pmrfc5424 模块,并配合 imtcp 和 mmjsonparse 实现 SD 字段解析与 JSON 提取。

如何利用rsyslog的mmpstrucdata模块深度解析复杂rfc5424规范的结构化安全syslog

rsyslog 并没有名为 mmpstrucdata 的官方模块。该名称在 rsyslog 官方文档、源码(v8.2204+)、模块列表及所有已知发行版中均不存在。你可能混淆了以下几种情况:

实际可用的结构化数据相关模块

rsyslog 处理 RFC 5424 结构化数据(Structured Data, SD)依赖的是内置解析能力与标准输入/解析模块,而非独立的 “mmpstrucdata”:

  • pmrfc5424:这是 rsyslog 的核心 RFC 5424 解析器模块(必须显式加载),负责将接收到的 RFC 5424 消息正确拆解为 %$structured-data%、%$msg%、%$hostname% 等内建属性,并支持提取 SD-ELEMENT 中的键值对(如 [myapp@12345 action="login" result="success"])
  • imtcp / imudp:网络输入模块,配合 pmrfc5424 才能真正识别并解析传入的 RFC 5424 流;若未启用 pmrfc5424,即使日志格式正确,SD 字段也会被当作普通字符串丢进 %msg%
  • mmjsonparse:当结构化数据以 JSON 形式嵌入 MSG 或 SD 中(如 [sd@12345 json="{\"src_ip\":\"10.0.1.5\",\"rule_id\":1001}"]),可用此模块进一步解析 JSON 内容为 rsyslog 属性

启用深度解析结构化安全日志的必要步骤

要真正实现对含复杂 SD 的安全日志(如防火墙、IDS、EDR 发送的 RFC 5424 日志)进行字段级提取和路由,需按顺序配置:

熊猫论文
熊猫论文

一款AI论文写作工具,主要用于AI学术写作优化工具,提供AI降重、查重检测、论文润色等服务,适合需要提升相关任务效率的用户。

下载
  • 在 /etc/rsyslog.conf 或 /etc/rsyslog.d/10-security.conf 开头加载必需模块:
    module(load="pmrfc5424")<br>
    module(load="imtcp")<br>
    module(load="mmjsonparse")
  • 配置 TCP 输入并绑定解析器:
    input(type="imtcp" port="6514" ruleset="parse-security" parser="pmrfc5424")
  • 定义规则集,在其中使用 SD 属性做条件判断或字段提取:
    例如匹配特定 SD ID 并提取 key:
    if $structured-data contains "firewall@32473" then {<br>
      set $.src = $!firewall@32473!src_ip;<br>
      set $.dst = $!firewall@32473!dst_ip;<br>
      action(type="omfile" file="/var/log/security/firewall.log")<br>
    }

验证结构化数据是否被正确解析

仅靠日志外观无法确认 SD 解析成功。推荐用以下方式实测:

  • 发送一条带 SD 的测试日志:
    logger -i -t "testfw" -p local0.info '1 2026-05-19T20:02:00+08:00 myhost firewall 12345 - [firewall@32473 src_ip="192.168.1.100" dst_ip="10.5.0.20" action="block"] blocked port 22'
  • 在 rsyslog 配置中临时添加调试输出:
    action(type="omfile" file="/tmp/rsyslog-debug.log" template="RSYSLOG_DebugFormat")
    检查输出中是否出现类似 $!firewall@32473!src_ip="192.168.1.100" 的字段路径
  • 使用 rsyslogd -N1 检查配置语法,确保无 pmrfc5424 加载错误

常见失败原因与修复提示

结构化数据“看不见”或提取为空,通常因以下原因:

  • 未加载 pmrfc5424 模块 —— 这是最常见疏漏,会导致整个 SD 字段被吞进 %msg%,无法访问
  • 输入模块未指定 parser="pmrfc5424" —— 即使模块已加载,不显式绑定,imtcp 仍走默认 BSD 解析路径
  • SD 元素 ID 含非法字符(如空格、下划线、小数点)或未遵循 @数字 格式 —— rsyslog 仅识别形如 example@12345 的合法 SD-ID
  • 日志实际是 RFC 3164 格式却误配为 RFC 5424 解析 —— 抓包查看原始流,确认首字段为 <pri>1</pri> 而非 <pri>May</pri>

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
C语言变量命名
C语言变量命名

c语言变量名规则是:1、变量名以英文字母开头;2、变量名中的字母是区分大小写的;3、变量名不能是关键字;4、变量名中不能包含空格、标点符号和类型说明符。php中文网还提供c语言变量的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

3429

3

c语言入门自学零基础
c语言入门自学零基础

C语言是当代人学习及生活中的必备基础知识,应用十分广泛,本专题为大家c语言入门自学零基础的相关文章,以及相关课程,感兴趣的朋友千万不要错过了。

2023.07.25

2388

9

c语言运算符的优先级顺序
c语言运算符的优先级顺序

c语言运算符的优先级顺序是括号运算符 > 一元运算符 > 算术运算符 > 移位运算符 > 关系运算符 > 位运算符 > 逻辑运算符 > 赋值运算符 > 逗号运算符。本专题为大家提供c语言运算符相关的各种文章、以及下载和课程。

2023.08.02

1320

5

c语言数据结构
c语言数据结构

数据结构是指将数据按照一定的方式组织和存储的方法。它是计算机科学中的重要概念,用来描述和解决实际问题中的数据组织和处理问题。数据结构可以分为线性结构和非线性结构。线性结构包括数组、链表、堆栈和队列等,而非线性结构包括树和图等。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.09

1278

4

c语言random函数用法
c语言random函数用法

c语言random函数用法:1、random.random,随机生成(0,1)之间的浮点数;2、random.randint,随机生成在范围之内的整数,两个参数分别表示上限和下限;3、random.randrange,在指定范围内,按指定基数递增的集合中获得一个随机数;4、random.choice,从序列中随机抽选一个数;5、random.shuffle,随机排序。

2023.09.05

1396

5

c语言const用法
c语言const用法

const是关键字,可以用于声明常量、函数参数中的const修饰符、const修饰函数返回值、const修饰指针。详细介绍:1、声明常量,const关键字可用于声明常量,常量的值在程序运行期间不可修改,常量可以是基本数据类型,如整数、浮点数、字符等,也可是自定义的数据类型;2、函数参数中的const修饰符,const关键字可用于函数的参数中,表示该参数在函数内部不可修改等等。

2023.09.20

2278

7

c语言get函数的用法
c语言get函数的用法

get函数是一个用于从输入流中获取字符的函数。可以从键盘、文件或其他输入设备中读取字符,并将其存储在指定的变量中。本文介绍了get函数的用法以及一些相关的注意事项。希望这篇文章能够帮助你更好地理解和使用get函数 。

2023.09.20

3700

8

c数组初始化的方法
c数组初始化的方法

c语言数组初始化的方法有直接赋值法、不完全初始化法、省略数组长度法和二维数组初始化法。详细介绍:1、直接赋值法,这种方法可以直接将数组的值进行初始化;2、不完全初始化法,。这种方法可以在一定程度上节省内存空间;3、省略数组长度法,这种方法可以让编译器自动计算数组的长度;4、二维数组初始化法等等。

2023.09.22

17255

6

c语言中null和NULL的区别
c语言中null和NULL的区别

c语言中null和NULL的区别是:null是C语言中的一个宏定义,通常用来表示一个空指针,可以用于初始化指针变量,或者在条件语句中判断指针是否为空;NULL是C语言中的一个预定义常量,通常用来表示一个空值,用于表示一个空的指针、空的指针数组或者空的结构体指针。

2023.09.22

549

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
零基础精通 PS 视频教程
零基础精通 PS 视频教程

共268课时 | 120.2万人学习

前端工程师必备技能—PS切图
前端工程师必备技能—PS切图

共11课时 | 2.2万人学习

麦子学院Photoshop切片视频教程
麦子学院Photoshop切片视频教程

共13课时 | 4.3万人学习