>  기사  >  시스템 튜토리얼  >  Golang 로그를 사용하여 애플리케이션을 모니터링하는 방법은 무엇입니까?

Golang 로그를 사용하여 애플리케이션을 모니터링하는 방법은 무엇입니까?

WBOY
WBOY원래의
2024-09-02 15:11:36886검색

그런데 Golang 로그를 사용하여 애플리케이션을 모니터링하려면 어떻게 해야 할까요? Golang에는 예외가 없으며 오류만 있습니다. 따라서 첫인상은 Golang 로깅 전략을 개발하는 것이 간단한 문제가 아니라는 것일 수 있습니다. 예외를 지원하지 않는 것은 실제로 문제가 되지 않습니다. 많은 프로그래밍 언어에서 예외는 예외성을 잃었습니다. 너무 과도하게 사용되어 유용성이 무시되었습니다.
如何使用 Golang 日志监控你的应用程序?
더 진행하기 전에 먼저 Golang 로깅의 기본 사항을 소개하고 Golang 로깅 표준, 메타데이터 중요성 및 Golang 로깅이 성능에 미치는 영향을 최소화하는 방법에 대해 논의하겠습니다. 로그를 사용하면 앱에서 사용자 활동을 추적하고, 프로젝트에서 손상된 구성 요소를 빠르게 식별하고, 전반적인 성능과 사용자 경험을 모니터링할 수 있습니다.

I. Golang 로그 기본
Golang “로그” 라이브러리 사용

Golang은 "log"라는 기본 로깅 라이브러리를 제공합니다. 해당 로거는 사용 가능한 옵션을 사용하여 오류 메시지 앞에 타임스탬프를 추가하는 등의 간단한 활동을 추적하는 데 적합합니다.

다음은 Golang에서 오류를 기록하는 방법에 대한 간단한 예입니다.

으아악

0으로 나누면 다음과 같은 결과가 나옵니다.

如何使用 Golang 日志监控你的应用程序?

Golang 기능을 빠르게 테스트하려면 go Playground를 사용할 수 있습니다.

로그에 항상 쉽게 액세스할 수 있도록 로그를 파일에 기록하는 것이 좋습니다.

으아아아

Golang 로그인에 대한 전체 가이드와 "로그" 라이브러리 내에서 사용할 수 있는 전체 기능 목록을 찾을 수 있습니다.

이제 오류와 근본 원인을 기록할 수 있습니다.

또한 로그는 활동 흐름을 통합하고, 수정해야 할 오류에 대한 컨텍스트를 찾거나 단일 요청이 시스템의 다른 애플리케이션 계층 및 API에 어떤 영향을 미치는지 조사하는 데 도움이 될 수 있습니다.

더 나은 로깅 결과를 얻으려면 먼저 프로젝트에서 가능한 한 많은 컨텍스트로 Golang 로그를 풍부하게 하고 사용하는 형식을 표준화해야 합니다. 이것이 Golang의 네이티브 라이브러리가 달성할 수 있는 한계입니다. 가장 널리 사용되는 라이브러리는 glog와 logrus입니다. 사용할 수 있는 좋은 라이브러리가 많이 있다는 것을 인정해야 합니다. 이미 JSON 형식을 지원하는 라이브러리를 사용하고 있다면 나중에 설명하겠지만 다른 라이브러리로 변경할 필요는 없습니다.

II. Golang 로그의 통합 형식
1) JSON 형식의 구조적 장점

프로젝트 또는 여러 마이크로서비스 내에서 Golang 로그를 구성하는 것은 아마도 가장 어려운 일이지만 일단 완료되면 쉽습니다. 기계가 읽을 수 있도록 로그를 구성하십시오(로그 수집 모범 사례에 대한 블로그 게시물 참조). 유연성과 계층 구조는 JSON 형식의 핵심이므로 인간과 기계가 정보를 쉽게 구문 분석하고 처리할 수 있습니다.

다음은 Logrus/Logmatic.io를 사용하여 JSON 형식으로 로그인하는 방법의 예입니다.

으아아아

은 결과를 출력합니다:

으아아아
2) 표준화된 Golang 로그

同一个错误出现在你代码的不同部分,却以不同形式被记录下来是一件可耻的事情。下面是一个由于一个变量错误导致无法确定 web 页面加载状态的例子。一个开发者日志格式是:

message: 'unknown error: cannot determine loading status from unknown error: missing or invalid arg value client'</span>

另一个人的格式却是:

unknown error: cannot determine loading status - invalid client</span>

强制日志标准化的一个好的解决办法是在你的代码和日志库之间创建一个接口。这个标准化接口会包括所有你想添加到你日志中的可能行为的预定义日志消息。这么做可以防止出现不符合你想要的标准格式的自定义日志信息。这么做也便于日志调查。

如何使用 Golang 日志监控你的应用程序?

由于日志格式都被统一处理,使它们保持更新也变得更加简单。如果出现了一种新的错误类型,它只需要被添加到一个接口,这样每个组员都会使用完全相同的信息。

最常使用的简单例子就是在 Golang 日志信息前面添加日志器名称和 id。你的代码然后就会发送 “事件” 到你的标准化接口,它会继续讲它们转化为 Golang 日志消息。

// 主要部分,我们会在这里定义所有消息。
// Event 结构体很简单。为了当所有信息都被记录时能检索它们,
// 我们维护了一个 Id
var (
    invalidArgMessage = Event{1, "Invalid arg: %s"}
    invalidArgValueMessage = Event{2, "Invalid arg value: %s => %v"}
    missingArgMessage = Event{3, "Missing arg: %s"}
)

// 在我们应用程序中可以使用的所有日志事件
func (l *Logger)InvalidArg(name string) {
    l.entry.Errorf(invalidArgMessage.toString(), name)
}
func (l *Logger)InvalidArgValue(name string, value interface{}) {
    l.entry.WithField("arg." + name, value).Errorf(invalidArgValueMessage.toString(), name, value)
}
func (l *Logger)MissingArg(name string) {
    l.entry.Errorf(missingArgMessage.toString(), name)
}

因此如果我们使用前面例子中无效的参数值,我们就会得到相似的日志信息:

time="2017-02-24T23:12:31+01:00" level=error msg="LoadPageLogger00003 - Missing arg: client - cannot determine loading status" arg.client=<nil> logger.name=LoadPageLogger

JSON 格式如下:

{"arg.client":null,"level":"error","logger.name":"LoadPageLogger","msg":"LoadPageLogger00003 - Missing arg: client - cannot determine loading status", "time":"2017-02-24T23:14:28+01:00"}
III. Golang 日志上下文的力量

现在 Golang 日志已经按照特定结构和标准格式记录,时间会决定需要添加哪些上下文以及相关信息。为了能从你的日志中抽取信息,例如追踪一个用户活动或者工作流,上下文和元数据的顺序非常重要。

例如在 logrus 库中可以按照下面这样使用 JSON 格式添加hostname、appname和session 参数:

// 对于元数据,通常做法是通过复用来重用日志语句中的字段。
  contextualizedLog := log.WithFields(log.Fields{
    "hostname": "staging-1",
    "appname": "foo-app",
    "session": "1ce3f6v"
  })
contextualizedLog.Info("Simple event with global metadata")

元数据可以视为 javascript 片段。为了更好地说明它们有多么重要,让我们看看几个 Golang 微服务中元数据的使用。你会清楚地看到是怎么在你的应用程序中跟踪用户的。这是因为你不仅需要知道一个错误发生了,还要知道是哪个实例以及什么模式导致了错误。假设我们有两个按顺序调用的微服务。上下文信息保存在头部(header)中传输:

func helloMicroService1(w http.ResponseWriter, r *http.Request) {
client := &http.Client{}
// 该服务负责接收所有到来的用户请求
// 我们会检查是否是一个新的会话还是已有会话的另一次调用
session := r.Header.Get("x-session")
if ( session == "") {
session = generateSessionId()
// 为新会话记录日志
}
// 每个请求的 Track Id 都是唯一的,因此我们会为每个会话生成一个
track := generateTrackId()
// 调用你的第二个微服务,添加 session/track
reqService2, _ := http.NewRequest("GET", "http://localhost:8082/", nil)
reqService2.Header.Add("x-session", session)
reqService2.Header.Add("x-track", track)
resService2, _ := client.Do(reqService2)
….

当调用第二个服务时:

func helloMicroService2(w http.ResponseWriter, r *http.Request) {
// 类似之前的微服务,我们检查会话并生成新的 track
session := r.Header.Get("x-session")
track := generateTrackId()
// 这一次,我们检查请求中是否已经设置了一个 track id,
// 如果是,它变为父 track
parent := r.Header.Get("x-track")
if (session == "") {
w.Header().Set("x-parent", parent)
}
// 为响应添加 meta 信息
w.Header().Set("x-session", session)
w.Header().Set("x-track", track)
if (parent == "") {
w.Header().Set("x-parent", track)
}
// 填充响应
w.WriteHeader(http.StatusOK)
io.WriteString(w, fmt.Sprintf(aResponseMessage, 2, session, track, parent))
}

现在第二个微服务中已经有和初始查询相关的上下文和信息,一个 JSON 格式的日志消息看起来类似如下。

在第一个微服务:

{"appname":"go-logging","level":"debug","msg":"hello from ms 1","session":"eUBrVfdw","time":"2017-03-02T15:29:26+01:00","track":"UzWHRihF"}

在第二个微服务:

{"appname":"go-logging","level":"debug","msg":"hello from ms 2","parent":"UzWHRihF","session":"eUBrVfdw","time":"2017-03-02T15:29:26+01:00","track":"DPRHBMuE"}

如果在第二个微服务中出现了错误,多亏了 Golang 日志中保存的上下文信息,现在我们就可以确定它是怎样被调用的以及什么模式导致了这个错误。

如果你想进一步深挖 Golang 的追踪能力,这里还有一些库提供了追踪功能,例如Opentracing。这个库提供了一种简单的方式在或复杂或简单的架构中添加追踪的实现。它通过不同步骤允许你追踪用户的查询,就像下面这样:

如何使用 Golang 日志监控你的应用程序?

IV. Golang 日志对性能的影响
1) 不要在 Goroutine 中使用日志

在每个 goroutine 中创建一个新的日志器看起来很诱人。但最好别这么做。Goroutine 是一个轻量级线程管理器,它用于完成一个 “简单的” 任务。因此它不应该负责日志。它可能导致并发问题,因为在每个 goroutine 中使用 log.New() 会重复接口,所有日志器会并发尝试访问同一个 io.Writer。

为了限制对性能的影响以及避免并发调用 io.Writer,库通常使用一个特定的 goroutine 用于日志输出。

2) 使用异步库

尽管有很多可用的 Golang 日志库,要注意它们中的大部分都是同步的(事实上是伪异步)。原因很可能是到现在为止它们中没有一个会由于日志严重影响性能。

但正如 Kjell Hedström 在他的实验中展示的,使用多个线程创建成千上万日志,即便是在最坏情况下,异步 Golang 日志也会有 40% 的性能提升。因此日志是有开销的,也会对你的应用程序性能产生影响。如果你并不需要处理大量的日志,使用伪异步 Golang 日志库可能就足够了。但如果你需要处理大量的日志,或者很关注性能,Kjell Hedström 的异步解决方案就很有趣(尽管事实上你可能需要进一步开发,因为它只包括了最小的功能需求)。

3)使用严重等级管理 Golang 日志

一些日志库允许你启用或停用特定的日志器,这可能会派上用场。例如在生产环境中你可能不需要一些特定等级的日志。下面是一个如何在 glog 库中停用日志器的例子,其中日志器被定义为布尔值:

type Log bool
func (l Log) Println(args ...interface{}) {
    fmt.Println(args...)
}
var debug Log = false
if debug {
    debug.Println("DEBUGGING")
}

然后你就可以在配置文件中定义这些布尔参数来启用或者停用日志器。

没有一个好的 Golang 日志策略,Golang 日志可能开销很大。开发人员应该抵制记录几乎所有事情的诱惑 - 尽管它非常有趣!如果日志的目的是为了获取尽可能多的信息,为了避免包含无用元素的日志的白噪音,必须正确使用日志。

V. 集中化 Golang 日志

如何使用 Golang 日志监控你的应用程序?

如果你的应用程序是部署在多台服务器上的,这样可以避免为了调查一个现象需要连接到每一台服务器的麻烦。日志集中确实有用。

使用日志装箱工具,例如 windows 中的 Nxlog,linux 中的 Rsyslog(默认安装了的)、Logstash 和 FluentD 是最好的实现方式。日志装箱工具的唯一目的就是发送日志,因此它们能够处理连接失效以及其它你很可能会遇到的问题。

这里甚至有一个Golang syslog 软件包帮你将 Golang 日志发送到 syslog 守护进程。

希望你享受你的 Golang 日志之旅

在你项目一开始就考虑你的 Golang 日志策略非常重要。如果在你代码的任意地方都可以获得所有的上下文,追踪用户就会变得很简单。从不同服务中阅读没有标准化的日志是已经很痛苦的事情。一开始就计划在多个微服务中扩展相同用户或请求 id,后面就会允许你比较容易地过滤信息并在你的系统中跟踪活动。

你是在构架一个很大的 Golang 项目还是几个微服务也会影响你的日志策略。一个大项目的主要组件应该有按照它们功能命名的特定 Golang 日志器。这使你可以立即判断出日志来自你的哪一部分代码。然而对于微服务或者小的 Golang 项目,只有较少的核心组件需要它们自己的日志器。但在每种情形中,日志器的数目都应该保持低于核心功能的数目。

你现在已经可以使用 Golang 日志量化决定你的性能或者用户满意度啦!


위 내용은 Golang 로그를 사용하여 애플리케이션을 모니터링하는 방법은 무엇입니까?의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

성명:
본 글의 내용은 네티즌들의 자발적인 기여로 작성되었으며, 저작권은 원저작자에게 있습니다. 본 사이트는 이에 상응하는 법적 책임을 지지 않습니다. 표절이나 침해가 의심되는 콘텐츠를 발견한 경우 admin@php.cn으로 문의하세요.