Langkah demi langkah menggunakan Python untuk memadam fail laluan panjang di bawah Windows

Latar belakang artikel 0x01

Baru-baru ini, penyimpanan sistem perniagaan syarikat pengarang menghampiri had, dan pelayan tidak akan dapat dijalankan tidak lama lagi, kerana sistem perniagaan A mengandungi berbilang subsistem A1, A2 , dan A3.. A, atas sebab reka bentuk, fail storan perantaraan subsistem ini semuanya disimpan dalam direktori induk yang sama Satu-satunya perbezaan ialah nama fail dan folder yang dijana oleh subsistem yang berbeza semuanya bermula dengan nama subsistem tersebut. Sebagai contoh, fail yang dijana oleh subsistem A1 semuanya dinamakan A1xxxxxx, dan nama fail yang dijana oleh subsistem A2 semuanya A2xxxxx. Sekarang kita perlu memadamkan fail sejarah beberapa subsistem ini untuk mengosongkan ruang pelayan Berpuluh-puluh terabait data yang disimpan bersama-sama. Kita hanya boleh menggunakan automasi program ? Sememangnya saya terfikir tentang ular sawa. Sebenarnya, saya tidak fikir keperluan untuk memadam fail hanya perlu perbincangan panjang, tetapi saya menghadapi beberapa masalah yang istimewa dan menarik serta beberapa penyelesaian yang menarik, jadi saya ingin berkongsi dengan anda, seperti memadam fail yang sangat panjang. di bawah sistem Windows, seperti daripada Baca dokumentasi bahasa Inggeris rasmi untuk mencari penyelesaian, dsb. Mari kita ke inti.

0x02 Gunakan python untuk memadam fail

Terdapat banyak cara untuk menggunakan python untuk memadam fail Cara paling langsung dan mudah ialah memanggil fungsi terbina dalam:

• os.remove () Padam fail
• os.rmdir() Padam folder kosong
• shutil.rmtree() Padamkan folder dan semua kandungan di bawah folder (termasuk subdirektori dan fail )

Dalam erti kata lain, teras penyelesaian kepada masalah ini ialah menangani ketiga-tiga fungsi di atas. Berbalik kepada masalah yang kami hadapi, sistem perniagaan A mengandungi berbilang subsistem A1, A2, A3... Disebabkan sebab reka bentuk, fail storan perantaraan subsistem ini semuanya disimpan dalam direktori induk yang sama. nama fail dan folder yang dijana oleh subsistem yang berbeza semuanya bermula dengan nama subsistem. Contohnya, fail yang dijana oleh subsistem A1 semuanya dinamakan A1xxxxxx​, dan nama fail yang dijana oleh subsistem A2 semuanya A2xxxxx Tujuannya sekarang adalah untuk memadamkan fail yang dijana oleh subsistem yang ditentukan dan mengekalkan fail subsistem lain.

Memecahkan keperluan sebenarnya menyelesaikan 4 masalah berikut:

1.

2. Bagaimana untuk mengenal pasti bahawa fail atau folder dijana oleh subsistem tertentu?

3. Bagaimana untuk menentukan sama ada laluan ialah fail atau direktori?

4. Bagaimana untuk mencari fail dan folder yang dijana oleh semua subsistem yang ditentukan?

Untuk soalan 1, seperti yang dijelaskan pada permulaan bahagian ini, anda boleh menggunakan fungsi terbina dalam python untuk memadam:

os.remove("path") # 删除指定文件
os.rmdir("path") # 删除一个空文件夹
shutil.rmtree("path") #删除一个文件夹及该文件夹下所有内容（包括子目录及文件）

Untuk soalan 2, fail dan fail yang dijana oleh subsistem khusus ialah Kaedah penamaan folder adalah semua corak tetap Contohnya, nama fail yang dijana oleh subsistem A1 semuanya A1xxxxx, jadi ia boleh dikenal pasti melalui padanan kata kunci. Satu cara yang mungkin ialah:

if keywords in filepath: # 如果文件名包含关键字keywords
os.remove(filepath) # 删除文件
else:
pass

Untuk soalan 3, memandangkan kaedah memadam direktori dan memadam fail adalah tidak konsisten, adalah perlu untuk menentukan sama ada laluan ialah direktori atau fail sebelum memadam, dan pilih pemadaman yang sesuai berdasarkan jenisnya, ini boleh dinilai dalam python menggunakan fungsi seperti **os.path.isdir()**, terutamanya fungsi berikut:

os.path.isdir("path") # 返回true则为目录，false则为文件
os.path.isfile("path") # 返回true则为文件，false则为目录

Untuk soalan 4, bagaimana untuk mencari semua fail yang hendak dipadamkan Fail, masalah ini sebenarnya adalah masalah traversal fail dalam direktori yang ditentukan, iaitu cara melintasi semua folder dan fail dalam direktori yang ditentukan. Untuk masalah ini, secara amnya terdapat dua penyelesaian, satu ialah kaedah depth-first traversal, dan satu lagi ialah kaedah breadth-first traversal Dalam contoh ini, kecekapan kedua-dua kaedah adalah sama, kerana kita akhirnya akan melintasi semua fail. Di samping itu, mujurlah, ular sawa terlalu berkuasa fungsi terbina dalamnya telah membantu kami melaksanakan kaedah traversal direktori yang luas dan kaedah os.walk("path"), iaitu untuk melintasi semua fail dalam direktori laluan dan folder. Penggunaan biasa adalah seperti berikut:

import os

path = "C:\A\"

for root, dirs, files in os.walk(path):
print(root)
print(dirs)
print(files)

Dalam contoh di atas, root mewakili laluan yang sedang dilalui, dirs mewakili semua subdirektori di bawah laluan semasa dan fail mewakili semua subfail di bawah laluan semasa . Dengan cara ini, semua direktori yang ditentukan boleh dilalui.

Masalah telah dipecahkan Mari kita gabungkan masalah untuk menyelesaikan pelaksanaan kod.

Pelaksanaan kod terakhir ialah:

import os
import shutil

path = "C:\A\"
keyword = "A1"

for root, dirs, files in os.walk(path):
for dir in dirs:
if keyword in dir:
rmpath = os.path.join(root, dir)
print("删除文件夹: %s" % rmpath)
shutil.rmtree(rmpath)
for file in files:
if keyword in file:
rmpath = os.path.join(root, file)
print("删除文件: %s" % rmpath)
os.remove(rmpath)

Iaitu, melalui keluasan dahulu. kaedah ( os.walk()) merentasi direktori yang ditentukan dan menentukan satu demi satu sama ada semua subdirektori dan fail dalam direktori memenuhi syarat kata kunci dan memadamnya jika ia sesuai.

Kesan berjalan ialah:

Nampaknya keperluan pada dasarnya diselesaikan pada ketika ini, tetapi dalam ujian sebenar, beberapa direktori yang sangat mendalam ditemui Tetapi ia tidak dipadamkan Apabila memadamkan direktori, ralat telah berlaku

Unexpected error: (< type 'exceptions.WindowsError'>, WindowsError(3, 'The system cannot find the path specified'), < traceback object at 0x0000000002714F88>)

大致意思就是python找不到这个路径，可是为什么呢？为此，我继续进行一番资料查询，后来大致定位了是由于文件路径过长导致的，是由于windows系统用户态的默认路径长度不能超过256个字节导致的。但是官方说256个字节是最长，但为何能创建超过256的呢，所以既然能创建，那就一定能删除，但是需要一些方法，经过一番学习，找到了好几种方法，下面介绍其中一种最为实用的方法，另外几个比如使用压缩软件压缩后删除（百度知道的结果）适合手动但不适合编程解决。这个方法在下一节中继续讲述。

0x03 windows 文件系统关于长路径文件的相关定义

为解决windows下的长文件删除的问题，最为权威的资料莫过于windows官方的描述，我阅读了微软关于文件名长度的这一块的定义及说明，找到解决方案，微软的原文如下：

关键意思如下：

1.Windows API 提供的文件路径理论上最长是 32767 个字节，普通状态下给用户使用是不超过256个字符，说是为了使用户操作更加方便。这里不得不吐槽一下了，确实操作方便了，但是方便的同时也可能带来不便，明明定义了32767这么长的字节，只给用256，未免太抠搜了一点

2.用户如果想要打破这个长度限制，可以通过一个特殊方式告诉windows系统自己想要使用超长文件，这个特殊的方式就是在绝对路径前加上** "?" **字符串。

3.这篇文档后面还有描述在windows10以后如何通过注册表的方式接触文件名长度限制，这里就没有截图了，因为不通用，win7怎么办呢？有兴趣的同学可以查看其原文链接阅读：https://docs.microsoft.com/en-US/windows/win32/fileio/maximum-file-path-limitation?tabs=cmd

好了，看到这，解决方法呼之欲出，其实简单得不能太简单，直接在绝对路径前加上一个"?"即可：

# 获取目标路径的绝对路径，并在路径前加上\?，
# 以解除windows的文件长度限制
path = '\\?\' + os.path.abspath(path)

0x04 改造 python 程序，删除长路径文件

根据上一节，对python程序进一步进行改造，加入windows长文件名限制解除，最后的完美删除工具就成型了:

import os
import shutil

path = "C:\A\"
keyword = "A1"

# 获取目标路径的绝对路径，并在路径前加上\?，
# 以解除windows的文件长度限制
path = '\\?\' + os.path.abspath(path)

for root, dirs, files in os.walk(path):
for dir in dirs:
if keyword in dir:
rmpath = os.path.join(root, dir)
print("删除文件夹: %s" % rmpath)
shutil.rmtree(rmpath)
for file in files:
if keyword in file:
rmpath = os.path.join(root, file)
print("删除文件: %s" % rmpath)
os.remove(rmpath)

虽然代码很短，只添加了一行，但是这一行，却完成了一个超级核心的任务，真可谓是灵魂一行啊，最后该工具中如在生产环境中发挥了其出色的作用，使服务器继续运转如飞了。

0x04 总结思考

啰嗦的话就不多说了，说几点思考 ：

1.遇到问题将问题进行分解，拆分成一个个小问题逐步击破 。

2.要善于阅读官方技术文档，有时候解决一个问题的核心可能很简单，代码可能也就一行两行，但是就是藏在某个角落，不仔细去阅读还真不一定找得出来 。

3.python是个好东西，要有将问题转化成使用python去解决的习惯，习惯成自然，python可能在工作中就发挥大作用了呢。

0x05 参考资料

1.https://docs.microsoft.com/en-US/windows/win32/fileio/maximum-file-path-limitation?tabs=cmd  

2.https://stackoverflow.com/questions/6996603/how-to-delete-a-file-or-folder-in

Atas ialah kandungan terperinci Langkah demi langkah menggunakan Python untuk memadam fail laluan panjang di bawah Windows. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!