怎么在Python中利用Logging模块记录多端运行日志

大磊酱_3306

大磊酱_3306

2026-04-12

351人浏览

原创

因为basicConfig()仅在根logger未配置时生效且默认只添加一个StreamHandler,后续调用被静默忽略;多端日志需手动创建Logger并显式添加多个Handler。

怎么在python中利用logging模块记录多端运行日志

为什么直接用 logging.basicConfig() 无法支持多端日志

因为 basicConfig() 只在根 logger 尚未配置时生效,且它默认只加一个 StreamHandler(输出到控制台)。一旦你尝试多次调用或想同时写文件+控制台+网络端,它就失效了——后续的 basicConfig() 调用会被静默忽略。多端日志必须手动创建 Logger 实例,并显式添加多个 Handler。

如何为同一个 logger 添加文件、控制台、HTTP 三个输出端

核心是复用同一个 Logger 对象,但给它挂多个 Handler,每个 Handler 独立设置格式、级别和目标。注意:Logger 自身的 level 是总闸门,各 Handler 的 level 是子过滤器。

  • 先用 logging.getLogger("myapp") 获取(或创建)命名 logger,避免污染 root
  • 调用 .setLevel(logging.DEBUG) 开启最低粒度日志捕获
  • 为文件输出添加 FileHandler("app.log"),设 level=logging.INFO
  • 为控制台添加 StreamHandler(),设 level=logging.WARNING(只报警告以上)
  • 若需发 HTTP,用 logging.handlers.HTTPHandler,注意它只支持 POST 且需服务端配合接收

示例关键片段:

import logging
from logging.handlers import HTTPHandler
<p>logger = logging.getLogger("myapp")
logger.setLevel(logging.DEBUG)</p><h1>文件端</h1><p>fh = logging.FileHandler("app.log")
fh.setLevel(logging.INFO)
fh.setFormatter(logging.Formatter("%(asctime)s - %(name)s - %(levelname)s - %(message)s"))
logger.addHandler(fh)</p><h1>控制台端</h1><p>sh = logging.StreamHandler()
sh.setLevel(logging.WARNING)
sh.setFormatter(logging.Formatter("%(levelname)s: %(message)s"))
logger.addHandler(sh)</p><h1>HTTP 端(假设后端监听 /log)</h1><p>http_handler = HTTPHandler("localhost:8000", "/log", method="POST")
http_handler.setLevel(logging.ERROR)
logger.addHandler(http_handler)
</p>

多进程写同一个日志文件会出问题吗

会。Python 标准 FileHandler 不做进程级同步,多进程并发写入会导致内容错乱、截断甚至丢日志。这不是 logging 模块的 bug,而是文件系统层面的竞态。

Biopython
Biopython

全面的分子生物学工具集。适用于序列操作、文件解析(FASTA/GenBank/PDB)、系统发育分析,以及通过 Bio.Entrez 以编程方式访问 NCBI/

下载
  • 单机多进程场景下,优先改用 RotatingFileHandler + delay=True 并配合外部锁(如 concurrent.futures.ThreadPoolExecutor 不适用,得用 filelock 库)
  • 更稳妥的做法是让所有进程把日志发到一个中心进程(比如用 QueueHandler + QueueListener),由该进程统一写文件
  • 若只是多线程,FileHandler 本身是线程安全的,无需额外处理

为什么日志里看不到模块名或行号,但代码里明明用了 %(filename)s 和 %(lineno)d

因为格式化字符串里的字段(如 %(filename)s)依赖 LogRecord 是否携带对应属性,而这些属性只有在调用 logger.debug() 等方法时,由 logging 框架从调用栈动态提取。如果你用了 logger.log(level, msg) 但没传 exc_info 或自定义 extra,通常不会丢;但若中间穿插了装饰器、异步回调(如 asyncio)、或用 functools.partial 包装了 logger 方法,调用栈可能被截断,导致 filename 和 lineno 回退到 logging 内部位置。

  • 验证方式:临时加一句 logger.debug("test", stacklevel=1),看是否恢复正确位置
  • 异步场景建议用 aiologger 替代标准 logging,或确保 stacklevel 补偿装饰器层数
  • 生产环境慎用 stacklevel > 1,它有性能开销,且容易误标

日志多端输出本身不难,难的是在多进程、异步、装饰器嵌套等真实场景下,保持各 handler 的行为稳定和上下文准确。尤其是 stacklevel 和 FileHandler 的进程安全,最容易在线上突然暴露。

Python免费学习笔记(深入):立即使用
在学习笔记中,你将探索 Python 的核心概念和高级技巧!

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

python

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

2023.07.20

1951

4

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

2023.07.25

5544

7

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.31

1889

3

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

2023.08.03

33817

23

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

3967

5

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

3967

5

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.11

1283

5

python合并两个列表
python合并两个列表

Python是一种强大的编程语言,具有许多方便的功能和工具。在Python中,有多种方法可以合并两个列表。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.10

636

4

python是前端还是后端
python是前端还是后端

Python属于前端也属于后端,其灵活性和丰富的生态系统使得开发人员能够在不同的领域中灵活运用。本专题为大家提供python相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.11

3083

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程