Bagaimana Memproses Fail Bersaiz Gigabait Baris demi Baris Tanpa Kehabisan Memori?

Cara Membaca Fail Besar-besaran Baris Mengikut Baris Tanpa Memori Terlebih Beban

Membaca fail yang panjang baris demi baris boleh menjadi satu cabaran, terutamanya apabila saiz fail melebihi memori sistem anda kapasiti. Dalam senario sedemikian, cubaan untuk memuatkan keseluruhan fail ke dalam memori menggunakan kaedah standard selalunya mengakibatkan ralat ingatan.

Pertimbangkan coretan kod berikut:

with open('inputfile.txt', 'r') as f:
    for line in f:
        # Process the line

Apabila melaksanakan kod ini pada fail besar, keseluruhan fail dimuatkan ke dalam memori, yang boleh menyebabkan masalah jika fail berada dalam gigabait julat.

Untuk mengelakkan isu ini, pertimbangkan untuk menggunakan fungsi fgets(), yang membolehkan anda membaca fail baris demi baris tanpa memuatkan keseluruhan fail ke dalam memori:

with open('inputfile.txt', 'r') as f:
    while True:
        line = fgets(f)
        if not line: break
        # Process the line

Pendekatan ini membaca fail baris demi baris, membebaskan memori sebaik sahaja setiap baris diproses, menghalang kesilapan ingatan.

Atas ialah kandungan terperinci Bagaimana Memproses Fail Bersaiz Gigabait Baris demi Baris Tanpa Kehabisan Memori?. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!