Maison >développement back-end >Tutoriel Python >Introduction à la méthode de fractionnement de gros fichiers txt ligne par ligne en Python

Introduction à la méthode de fractionnement de gros fichiers txt ligne par ligne en Python

黄舟
黄舟original
2017-10-10 10:49:223720parcourir

本文通过代码给大家介绍了Python 逐行分割大txt文件的方法,在文中给大家提到了Python从txt文件中逐行读取数据的方法,需要的朋友参考下吧

代码如下所示:


# -*- coding: <encoding name> -*-
import io
LIMIT = 150000
file_count = 0
url_list = []
with io.open(&#39;D:\DB_NEW_bak\DB_NEW_20171009_bak.sql&#39;,&#39;r&#39;,encoding=&#39;utf-16&#39;) as f:
  for line in f:
    url_list.append(line)
    if len(url_list) < LIMIT:
      continue
    file_name = str(file_count)+".sql"
    with io.open(file_name,&#39;w&#39;,encoding=&#39;utf-16&#39;) as file:
      for url in url_list[:-1]:
        file.write(url)
      file.write(url_list[-1].strip())
      url_list=[]
      file_count+=1
if url_list:
  file_name = str(file_count) + ".sql"
  with io.open(file_name,&#39;w&#39;,encoding=&#39;utf-16&#39;) as file:
    for url in url_list:
      file.write(url)
print(&#39;done&#39;)

Python从txt文件中逐行读取数据

非常的简单,提供三种方法:

方法一:


f = open("foo.txt")       # 返回一个文件对象 
line = f.readline()       # 调用文件的 readline()方法 
while line: 
  print line,         # 后面跟 &#39;,&#39; 将忽略换行符 
  # print(line, end = &#39;&#39;)   # 在 Python 3中使用 
  line = f.readline() 
 
f.close()

方法二:


for line in open("foo.txt"): 
  print line,

方法三:


f = open("c:\\1.txt","r") 
lines = f.readlines()#读取全部内容 
for line in lines 
  print line

总结

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!

Déclaration:
Le contenu de cet article est volontairement contribué par les internautes et les droits d'auteur appartiennent à l'auteur original. Ce site n'assume aucune responsabilité légale correspondante. Si vous trouvez un contenu suspecté de plagiat ou de contrefaçon, veuillez contacter admin@php.cn