Python文件批量处理_目录扫描解析【指导】

冬枫小哥_4941

冬枫小哥_4941

2026-01-02

777人浏览

原创

Python批量处理文件推荐用pathlib遍历(如Path(".").rglob("*.txt")),os.walk适合深层嵌套统计,需注意路径准确、异常控制、编码指定(utf-8)、覆盖防护及进度提示。

python文件批量处理_目录扫描解析【指导】

Python批量处理文件,核心是用 os 或 pathlib 扫描目录结构,再结合具体逻辑(如读取、重命名、过滤、转换)逐个操作文件。关键不是写得复杂,而是路径准确、异常可控、逻辑清晰。

用 pathlib 遍历所有文件(推荐新手)

pathlib 是 Python 3.4+ 内置模块,语法简洁、跨平台友好,比 os.walk 更易读。

  • 扫描当前目录下所有 .txt 文件:
      from pathlib import Path
      for f in Path(".").rglob("*.txt"):
        if f.is_file():
          print(f.name, f.parent)
  • 只扫一级子目录(不递归):
      for f in Path("data").iterdir():
        if f.is_file() and f.suffix == ".csv":
          process_csv(f)

用 os.walk 处理深层嵌套结构

需要明确获取“根目录、子目录名列表、文件名列表”三元组时,os.walk 更直接,尤其适合按层级做统计或跳过特定文件夹。

windows-screenshot-ocr
windows-screenshot-ocr

Windows全屏截图(自动标记鼠标位置)+ 原生OCR文字识别。本地运行,无需联网和API Key,适用于截图分析和自动化OCR场景。

下载
  • 跳过名为 "__pycache__" 或 "temp" 的目录:
      import os
      for root, dirs, files in os.walk("project"):
        dirs[:] = [d for d in dirs if d not in ("__pycache__", "temp")]
        for file in files:
          if file.endswith(".log"):
            archive_log(os.path.join(root, file))

安全读写:避免覆盖、编码错误和权限问题

批量操作最常出错的不是逻辑,而是路径拼错、中文乱码、静默覆盖。

  • 读文本文件务必指定 encoding,尤其 Windows 下默认 cp1252:
      with open(f, encoding="utf-8") as fp:
        content = fp.read()
  • 写入前检查目标路径是否存在,避免 OSError:
      output = f.with_suffix(".clean.csv")
      output.parent.mkdir(parents=True, exist_ok=True)
      output.write_text(clean_data, encoding="utf-8")
  • 重命名/移动前加 exists() 判断,防止意外覆盖:
      if not new_path.exists():
        f.rename(new_path)
      else:
        print(f"跳过 {f.name}:目标已存在")

加进度提示与简单日志(实用但不啰嗦)

处理几百个文件时,卡住或没反应容易让人怀疑脚本挂了。一行 print 或 tqdm 就够用。

  • 基础计数提示(无需装包):
      files = list(Path("input").rglob("*.json"))
      for i, f in enumerate(files, 1):
        process(f)
        print(f"\r处理中: {i}/{len(files)}", end="")
  • 想更专业点,pip install tqdm 后:
      from tqdm import tqdm
      for f in tqdm(files, desc="解析 JSON"): process(f)

Python免费学习笔记(深入):立即使用
在学习笔记中,你将探索 Python 的核心概念和高级技巧!

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

2023.08.07

2235

5

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.23

3602

1

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

2023.10.13

1196

3

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

2025.09.10

4159

7

pip安装使用方法
pip安装使用方法

安装步骤:1、确保Python已经正确安装在您的计算机上;2、下载“get-pip.py”脚本;3、按下Win + R键,然后输入cmd并按下Enter键来打开命令行窗口;4、在命令行窗口中,使用cd命令切换到“get-pip.py”所在的目录;5、执行安装命令;6、验证安装结果即可。大家可以访问本专题下的文章,了解pip安装使用方法的更多内容。

2023.10.09

3370

5

更新pip版本
更新pip版本

更新pip版本方法有使用pip自身更新、使用操作系统自带的包管理工具、使用python包管理工具、手动安装最新版本。想了解更多相关的内容,请阅读专题下面的文章。

2024.12.20

7663

6

pip设置清华源
pip设置清华源

设置方法:1、打开终端或命令提示符窗口;2、运行“touch ~/.pip/pip.conf”命令创建一个名为pip的配置文件;3、打开pip.conf文件,然后添加“[global];index-url = https://pypi.tuna.tsinghua.edu.cn/simple”内容,这将把pip的镜像源设置为清华大学的镜像源;4、保存并关闭文件即可。

2024.12.23

9342

11

python升级pip
python升级pip

本专题整合了python升级pip相关教程,阅读下面的文章了解更多详细内容。

2025.07.23

4867

16

python中print函数的用法
python中print函数的用法

python中print函数的语法是“print(value1, value2, ..., sep=' ', end='\n', file=sys.stdout, flush=False)”。本专题为大家提供print相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.27

3240

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程