亚洲在线久爱草,狠狠天天香蕉网,天天搞日日干久草,伊人亚洲日本欧美

為了賬號安全,請及時綁定郵箱和手機立即綁定
已解決430363個問題,去搜搜看,總會有你想問的

如何在不將其加載到內存的情況下逐行讀取Python中的大型文本文件?

如何在不將其加載到內存的情況下逐行讀取Python中的大型文本文件?

翻閱古今 2019-06-28 16:48:14
如何在不將其加載到內存的情況下逐行讀取Python中的大型文本文件?我需要逐行讀一個大文件。假設該文件的容量超過5GB,我需要讀取每一行,但顯然我不想使用readlines()因為它會在內存中創建一個非常大的列表。下面的代碼將如何適用于這種情況?是xreadlines一個地讀進記憶?需要生成器表達式嗎?f = (line for line in open("log.txt").xreadlines())  # how much is loaded in memory?f.next()另外,我還能做些什么才能像linux那樣,按相反的順序讀取這些內容呢?tail指揮部?我發現:http://code.google.com/p/pytailer/和"按文本文件行讀取的Python頭、尾和后讀"兩個人都干得很好!
查看完整描述

3 回答

?
茅侃侃

TA貢獻1842條經驗 獲得超22個贊

我提供這個答案是因為基思雖然簡潔,但沒有關閉文件明示

with open("log.txt") as infile:
    for line in infile:
        do_something_with(line)


查看完整回答
反對 回復 2019-06-28
?
海綿寶寶撒

TA貢獻1809條經驗 獲得超8個贊

您所需要做的就是使用文件對象作為迭代器。

for line in open("log.txt"):
    do_something_with(line)

更好的方法是在最近的Python版本中使用上下文管理器。

with open("log.txt") as fileobject:
    for line in fileobject:
        do_something_with(line)

這也將自動關閉文件。


查看完整回答
反對 回復 2019-06-28
?
哆啦的時光機

TA貢獻1779條經驗 獲得超6個贊

一種古老的方法:

fh = open(file_name, 'rt')line = fh.readline()while line:
    # do stuff with line
    line = fh.readline()fh.close()


查看完整回答
反對 回復 2019-06-28
  • 3 回答
  • 0 關注
  • 808 瀏覽
慕課專欄
更多

添加回答

舉報

0/150
提交
取消
微信客服

購課補貼
聯系客服咨詢優惠詳情

幫助反饋 APP下載

慕課網APP
您的移動學習伙伴

公眾號

掃描二維碼
關注慕課網微信公眾號