Java 日志记录怎么用 Loki 采集日志

雨辰小哥_5514

雨辰小哥_5514

2026-11-22

791人浏览

原创

java 应用使用 loki 采集日志,核心做法是引入 promtail 作为日志代理,在 java 端将日志输出为 json 格式并写入本地文件,promtail 读取该文件后通过 http api 推送至 loki。具体操作是在 logback.xml 中配置 jsonencoder 和 fileappender,确保每条日志包含 level、logger 等标准字段,同时设置 promtail 的 scrape_configs 指向日志路径并匹配标签。

Java 日志记录怎么用 Loki 采集日志

如何配置 Logback 输出符合 Loki 要求的 JSON 日志

要让 Loki 正确解析日志,必须使用 JsonEncoder 替代默认的 PatternLayoutEncoder,因为 Loki 依赖结构化数据来提取标签(Labels)。在 logback-spring.xml 中,需引入 net.logstash.logback.encoder.LogstashEncoder 或 ch.qos.logback.classic.encoder.JsonEncoder,并在 appender 中指定输出目标为本地文件。关键点是确保生成的 JSON 中包含 level 和 logger_name 字段,Loki 默认会提取这些字段作为索引依据。

Java 日志记录怎么用 Loki 采集日志

{
  "version": "1.0",
  "timestamp": "2023-10-27T10:00:00.000+08:00",
  "logger_name": "com.example.MyService",
  "thread_name": "main",
  "level": "INFO",
  "level_value": 20000,
  "message": "Application started successfully"
}

上述 JSON 结构展示了单条日志的标准形态。在实际配置中,logback-spring.xml 应如下所示:首先定义一个 FILE appender,其 class 为 ch.qos.logback.core.FileAppender,encoder 使用 net.logstash.logback.encoder.LogstashEncoder。这样,所有通过 Logger 实例输出的日志都会自动序列化为 JSON 并追加到指定文件中。开发者需注意,如果使用了 MDC(Mapped Diagnostic Context),LogstashEncoder 会自动将其合并到 JSON 根节点下,便于后续在 Grafana 中过滤。

如何配置 Promtail 读取并发送日志到 Loki

Promtail 负责从文件系统抓取日志并发送给 Loki,其核心配置在于 scrape_configs 中的 static_configs 和 pipeline_stages。需要指定 targets 为 localhost,labels 用于区分不同的应用实例,例如 job 设为 java-app,instance 设为主机名。此外,由于 Loki 对时间戳敏感,通常需要在 pipeline 中使用 timestamp 阶段解析 JSON 中的 timestamp 字段,否则 Loki 会使用接收时间,导致日志顺序混乱。

使用 Husky 在 JavaScript 仓库中强制执行本地 Git 钩子检查
使用 Husky 在 JavaScript 仓库中强制执行本地 Git 钩子检查

使用 Husky 将 pre-commit、pre-push 和 commit-msg 检查集成到仓库中,以便代理和开发人员在更改离开工作站之前运行相同的本地防护措施。

下载

Java 日志记录怎么用 Loki 采集日志

server:
  http_listen_port: 9080
  grpc_listen_port: 0

positions:
  filename: /tmp/positions.yaml

clients:
  - url: http://loki:3100/loki/api/v1/push

scrape_configs:
  - job_name: java-app
    static_configs:
      - targets:
          - localhost
        labels:
          job: java-app
          instance: my-host
          __path__: /var/log/my-java-app/*.log
    pipeline_stages:
      - json:
          expressions:
            level: level
            logger: logger_name
      - timestamp:
          source: timestamp
          format: RFC3339Nano
      - output:
          source: message

这段 YAML 配置了 Promtail 的基本行为。它监听本地端口 9080,并将日志推送到地址为 http://loki:3100/loki/api/v1/push 的 Loki 服务。在 scrape_configs 中,__path__ 标签告诉 Promtail 去读取 /var/log/my-java-app/ 目录下所有以 .log 结尾的文件。通过 json 阶段,我们将 JSON 中的 level 和 logger_name 提取出来,虽然 Promtail 默认会处理标准字段,但显式声明有助于调试。最后,output 阶段确保只有 message 字段被发送到 Loki,避免冗余数据占用存储。

当日志中出现异常堆栈时,Promtail 如何处理多行日志

Java 异常堆栈通常跨越多行,如果 Promtail 按行切割,会导致一条日志被拆分成多条,破坏完整性。解决此问题的方法是启用 Promtail 的 multiline 功能,配置 match 阶段来识别堆栈起始行。通常,异常堆栈的第一行包含 Exception 关键字,后续行以空格或缩进开头。通过设置 drop 或 keep 策略,可以将多行合并为一条完整的日志事件。

scrape_configs:
  - job_name: java-app
    static_configs:
      - targets:
          - localhost
        labels:
          job: java-app
          instance: my-host
          __path__: /var/log/my-java-app/*.log
    pipeline_stages:
      - multiline:
          firstline: '^\d{4}-\d{2}-\d{2} \d{2}:\d{2}:\d{2},\d{3}'
          max_wait_time: 3s
      - json:
          expressions:
            level: level
            logger: logger_name
      - timestamp:
          source: timestamp
          format: yyyy-MM-dd HH:mm:ss,SSS
      - output:
          source: message

在上述配置中,multiline 阶段的 firstline 正则表达式匹配 Logback 默认的时间戳格式(如 2023-10-27 10:00:00,123)。这意味着每一行以时间戳开头的都被视为新日志的开始,而中间的非时间戳行(即堆栈跟踪)会被附加到前一条日志中。max_wait_time 设置为 3 秒,防止因网络延迟或日志写入间隔过长导致合并错误。这种配置确保了即使发生复杂的嵌套异常,Grafana 中也能看到完整的一行日志,方便排查问题。

Java免费学习笔记:立即使用
解锁 Java 大师之旅:从入门到精通的终极指南

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

java

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
java
java

Java是一个通用术语,用于表示Java软件及其组件,包括“Java运行时环境 (JRE)”、“Java虚拟机 (JVM)”以及“插件”。php中文网还为大家带了Java相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

2023.06.15

13177

6

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

2023.07.05

10222

9

java自学难吗
java自学难吗

Java自学并不难。Java语言相对于其他一些编程语言而言,有着较为简洁和易读的语法,本专题为大家提供java自学难吗相关的文章,大家可以免费体验。

2023.07.31

8652

8

java配置jdk环境变量
java配置jdk环境变量

Java是一种广泛使用的高级编程语言,用于开发各种类型的应用程序。为了能够在计算机上正确运行和编译Java代码,需要正确配置Java Development Kit(JDK)环境变量。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.01

1364

3

java保留两位小数
java保留两位小数

Java是一种广泛应用于编程领域的高级编程语言。在Java中,保留两位小数是指在进行数值计算或输出时,限制小数部分只有两位有效数字,并将多余的位数进行四舍五入或截取。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.02

1088

3

java基本数据类型
java基本数据类型

java基本数据类型有:1、byte;2、short;3、int;4、long;5、float;6、double;7、char;8、boolean。本专题为大家提供java基本数据类型的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

1636

5

java有什么用
java有什么用

java可以开发应用程序、移动应用、Web应用、企业级应用、嵌入式系统等方面。本专题为大家提供java有什么用的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

3449

5

java在线网站
java在线网站

Java在线网站是指提供Java编程学习、实践和交流平台的网络服务。近年来,随着Java语言在软件开发领域的广泛应用,越来越多的人对Java编程感兴趣,并希望能够通过在线网站来学习和提高自己的Java编程技能。php中文网给大家带来了相关的视频、教程以及文章,欢迎大家前来学习阅读和下载。

2023.08.03

20651

3

配置java环境变量
配置java环境变量

配置Java环境变量是为了让操作系统能够识别和使用Java的相关命令和功能。本专题为大家提供配置java环境变量相关文章,帮助大家解决问题。

2023.08.03

1495

8

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
dev.java 官方:Learn Java
dev.java 官方:Learn Java

共0课时 | 0人学习

Java JDBC数据库连接官方教程
Java JDBC数据库连接官方教程

共0课时 | 0人学习