Python中如何对日期字符串进行格式转换_使用to_datetime实现标准化

小萱小哥_9930

小萱小哥_9930

2026-05-07

188人浏览

原创

to_datetime报parsererror或valueerror的根本原因是默认智能推断对中文、混用分隔符、无前导零等不规范格式容忍度极低;应优先显式指定format参数,或对多格式混杂数据采用errors='coerce'分步清洗+正则归一化,辅以apply兜底。

python中如何对日期字符串进行格式转换_使用to_datetime实现标准化

to_datetime 为什么总报 ParserError 或 ValueError

直接用 pd.to_datetime() 解析不规范的日期字符串(比如 "2023/04/01"、"01-APR-2023"、"2023年4月1日")时,经常遇到 ParserError: Unknown string format 或 ValueError: time data '...' does not match format。根本原因不是函数不行,而是它默认启用智能推断(infer_datetime_format=False 且 format=None),对中文、混用分隔符、无前导零等场景容忍度极低。

  • 优先显式指定 format 参数,比依赖自动推断更稳定、更快
  • 遇到多种格式混杂(如日志中不同模块输出不同格式),别硬塞进一个 format,改用 errors='coerce' + 后续清洗
  • infer_datetime_format=True 只对标准 ISO 格式(如 "2023-04-01")加速有效,对 "04/01/2023" 这类可能歧义的格式反而容易错判

中文日期和非标准分隔符怎么写 format 字符串

Python 的 strptime 格式码是基础,pd.to_datetime() 完全兼容。关键是要把字符串中的每个可见字符都对应上:汉字、括号、中文标点、空格都不能漏。

  • "2023年04月01日" → format="%Y年%m月%d日"
  • "2023-04-01 15:30:22.123" → format="%Y-%m-%d %H:%M:%S.%f"(注意 .%f 匹配毫秒)
  • "01/APR/2023" → format="%d/%b/%Y"(%b 是英文缩写,%B 是全称;中文月份需用 locale 或先替换)
  • 含空格或括号,如 "[2023-04-01] " → format="[%Y-%m-%d] "(末尾空格也要写进去)

混合格式数据如何安全转换而不丢行

真实数据常混着几种格式,比如 CSV 中一列同时有 "2023/04/01"、"01-APR-2023"、"20230401"。强行统一 format 会报错,设 errors='coerce' 又导致合法日期变 NaT。

Li Python Sec Check
Li Python Sec Check

Python 安全规范检查工具:基于 CloudBase 规范、腾讯安全指南,LLM 智能分析(默认禁用,优先本地执行)

下载
  • 分步转换:先用最常见格式跑一遍,标记成功结果;对剩余 NaT 行再试第二种格式
  • 用 apply + 自定义函数兜底,例如:
    def safe_parse(x):
        for fmt in ["%Y/%m/%d", "%d-%b-%Y", "%Y%m%d"]:
            try:
                return pd.to_datetime(x, format=fmt)
            except (ValueError, TypeError):
                continue
        return pd.NaT
    df["date"] = df["raw_date"].apply(safe_parse)
  • 避免在大数据集上滥用 apply,优先考虑向量化尝试(如先按正则分组再批量转换)

时区和性能要注意什么

pd.to_datetime() 默认返回 naive datetime(无时区信息)。如果原始字符串带时区(如 "2023-04-01 12:00:00+08:00"),必须加 utc=True 或 utc=False 显式控制,否则时区部分会被截掉或误解析。

  • 大批量转换(百万行以上)时,format 比不设快 5–10 倍;infer_datetime_format=True 仅在纯 ISO 格式下有明显收益
  • 若后续只做日期比较或分组,可考虑用 dt.date 提取日期部分,但注意这会丢失时间精度且不可逆
  • 从数据库读取时,尽量让 SQL 层完成格式标准化(如 PostgreSQL 的 TO_TIMESTAMP),减少 Python 层解析压力

真正麻烦的从来不是单个格式怎么写,而是同一字段里藏着几种逻辑上等价、字符串上却完全不同的表示方式——这时候靠猜 format 不如先做一次分布统计,看看到底有哪些模式。

Python免费学习笔记(深入):立即使用
在学习笔记中,你将探索 Python 的核心概念和高级技巧!

相关专题

更多
python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

2023.07.20

1671

4

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

2023.07.25

4164

7

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.31

1669

3

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

2023.08.03

24137

23

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

2947

5

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

2987

5

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.11

1163

5

python合并两个列表
python合并两个列表

Python是一种强大的编程语言,具有许多方便的功能和工具。在Python中,有多种方法可以合并两个列表。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.10

596

4

python是前端还是后端
python是前端还是后端

Python属于前端也属于后端,其灵活性和丰富的生态系统使得开发人员能够在不同的领域中灵活运用。本专题为大家提供python相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.11

2303

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程