Python中使用超長的List導致記憶體佔用過大

Question

我需要在一段程式中使用一個長度超過50萬的List，但結果就是記憶體使用率瞬間升高

請問應該用什麼方法來優化？

Answer 1

這個 list 一定要放在記憶體裡嗎？

如果你是一條一條處理的，並不需要全在內存，你可以把這些內容先寫到磁碟文件，然後打開它，用類似下面的語句：

for item in file('xxx.txt').xreadlines():
    ... # 解析出你的内容，并处理