Python如何读取Excel多表数据_Pandas实现批量导入技巧

老丽吖_8666

老丽吖_8666

2026-03-25

400人浏览

原创

用 sheet_name=None 可一次性读取所有 sheet 并返回字典,最省事安全;需统一列名、类型及空值处理再合并;推荐 engine="openpyxl";读完务必检查 keys() 和 shape 验证数据完整性。

python如何读取excel多表数据_pandas实现批量导入技巧

用 pd.read_excel 一次性读取多个 sheet,别手动循环

直接传 sheet_name=None 给 pd.read_excel,它会返回一个 dict,key 是 sheet 名,value 是对应 DataFrame。这是最省事也最安全的方式,比写 for 循环 + 重复调用 read_excel 快得多,底层只打开一次 Excel 文件。

常见错误是误以为 sheet_name="Sheet1, Sheet2" 能生效——不行,字符串只认单个 sheet;传列表如 ["Sheet1", "Sheet2"] 倒是可以,但返回的是 dict 子集,不是全量;而 None 才是“全部”的明确信号。

  • sheet_name=None:返回所有 sheet 的 dict,推荐用于批量处理
  • sheet_name=["A", "B"]:只读指定几个,适合有明确目标表的场景
  • sheet_name=0 或 "Sheet1":单表读取,性能略高但不满足多表需求
  • 注意:如果 Excel 里有隐藏 sheet,read_excel 默认也会读进来,需后续用 df.keys() 检查并过滤

合并多 sheet 数据前,先统一列名和类型

不同 sheet 很可能字段名大小写不一致(如 "ID" vs "id")、空格残留("amount ")、甚至同一列在不同表里是字符串或数字混用。直接 pd.concat 会导致列错位、类型转成 object、后续计算报错。

建议在 concat 前加一层标准化处理:

  • 统一列名:用 df.columns.str.strip().str.lower() 清理空格和大小写
  • 显式指定 dtype:比如 dtype={"id": "Int64", "price": "float64"},避免 read_excel 自动推断出 object
  • 对齐空值:Excel 里空单元格可能被读成 NaN、None 或空字符串,统一用 df.replace({"": pd.NA}) 再转 pd.NA
  • 慎用 ignore_index=True:concat 后重排索引虽整洁,但会丢失原始 sheet 来源信息;如需溯源,建议提前加一列 source_sheet

大文件读 Excel 多表时,openpyxl 引擎比默认更快更稳

默认引擎 xlrd 已停止维护,且不支持 .xlsx 格式;openpyxl 是当前推荐引擎,尤其对含公式、样式、大数据量的文件更可靠。Pandas 1.4+ 默认已切到 openpyxl,但老项目或显式指定引擎时仍需确认。

macOS UI 自动化技能包 —— 用 Python 控制你的 Mac
macOS UI 自动化技能包 —— 用 Python 控制你的 Mac

让 macOS 自动化像说话一样简单 —— 用代码控制你的 Mac,无需学习 AppleScript 系统要求 macOS 14+ (Sonoma) Python 3.9+ 需要开启:辅助功能 + 屏幕录制权限

下载

性能差异明显:读一个 5MB、20 个 sheet 的文件,openpyxl 平均快 30%–50%,内存占用更低,且不会因某张 sheet 格式异常(如合并单元格跨行)而整个失败。

  • 显式指定:加参数 engine="openpyxl",尤其在 CI/CD 环境中避免依赖隐式行为
  • 不要装 xlrd>2.0:新版 xlrd 只支持 .xls,装了反而导致 .xlsx 报错 Unsupported format
  • 若需读取带宏的 .xlsm 文件,必须用 engine="openpyxl",xlrd 完全不支持

读完多表后,别急着 pd.concat,先看 df.keys() 和 df[key].shape

很多问题其实出在“以为读进来了”,结果某张表是空的、名字被改过、或者被保护了没权限读——但 read_excel(sheet_name=None) 不报错,只是默默跳过或返回空 DataFrame。

真正稳妥的做法是读完立刻检查:

  • 打印 list(result_dict.keys()),确认 sheet 名是否符合预期(注意 Excel 中重命名过的 sheet 名)
  • 遍历每个 df,用 df.shape 看行数列数,空表会是 (0, N),不是 None
  • 对关键字段做 df[col].nunique() 或 df[col].dtypes,验证数据是否真被解析出来,而不是全为 object
  • 如果某张表始终读不出来,试试单独读它:pd.read_excel(file, sheet_name="ProblemSheet"),再看具体报什么错

最常被忽略的是 sheet 名里的不可见字符(比如复制粘贴带来的零宽空格),肉眼看着一样,实际 key 对不上——这时候 repr(key) 就很有用。

Python免费学习笔记(深入):立即使用
在学习笔记中,你将探索 Python 的核心概念和高级技巧!

相关专题

更多
python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

2023.07.20

1851

4

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

2023.07.25

4984

7

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.31

1789

3

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

2023.08.03

29937

23

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

3567

5

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

3587

5

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.11

1223

5

python合并两个列表
python合并两个列表

Python是一种强大的编程语言,具有许多方便的功能和工具。在Python中,有多种方法可以合并两个列表。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.10

616

4

python是前端还是后端
python是前端还是后端

Python属于前端也属于后端,其灵活性和丰富的生态系统使得开发人员能够在不同的领域中灵活运用。本专题为大家提供python相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.11

2763

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Uvicorn官方安装与入门手册
Uvicorn官方安装与入门手册

共0课时 | 0人学习

Python uv官方项目管理指南
Python uv官方项目管理指南

共0课时 | 0人学习

Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习