這次帶給大家python怎麼批次讀取txt檔案為DataFrame格式,python批次讀取txt檔案為DataFrame格式的注意事項有哪些,以下就是實戰案例,一起來看一下。
我們有時候會批次處理同一個資料夾下的文件,並且希望讀取到一個文件裡面便於我們計算操作。比方我有下圖一系列的txt文件,我該如何把它們寫入一個txt文件中並且讀取為DataFrame格式呢?
首先我們要用到glob模組,這個python內建的模組可以說是非常的好用。
glob.glob('*.txt')
得到以下結果:
#all.txt是我最後得到的結果檔案。可以見返回的是一個包含txt文件名稱的列表,當然如果你的資料夾下面只有txt文件,那麼你用os.listdir()可以得到一個一樣的列表
然後讀取的時候只要注意txt檔案的編碼格式(可以用notepad 打開記事本查看)和間隔符的形式就好了,完整的程式碼如下:
import os import pandas import codecs import glob import pandas as pd os.getcwd() os.chdir('D:\AAAASXQ\python study\data preprocessing') def txtcombine(): files = glob.glob('*.txt') all = codecs.open('all.txt','a') for filename in flist: print(filename) fopen=codecs.open(filename,'r',encoding='utf-8') lines=[] lines=fopen.readlines() fopen.close() i=0 for line in lines: for x in line: all.write(x) #读取为DataFrame格式 all1 = pd.read_csv('all.txt',sep=' ',encoding='GB2312') #保存为csv格式 all1.to_csv('all.csv',encoding='GB2312') if name == 'main': txtcombine()
相信看了本文案例你已經掌握了方法,更多精彩請關注php中文網其它相關文章!
推薦閱讀:
以上是python怎麼批次讀取txt檔案為DataFrame格式的詳細內容。更多資訊請關注PHP中文網其他相關文章!