首頁  >  問答  >  主體

python - 使用requests下载大文件,设置steam=True,如何确保文件被完整下载?

我使用requests下载文件,有时候会在网络情况不好的情况下不能完整的下载文件,该如何确保文件被完整的下载?

条件1: 文件的响应头中并没有content-length,我无法知道文件具体的大小

下载代码如下

r = requests.get(url, stream=True)
with open('test', 'wb') as fd:
    for chunk in r.iter_content(1024 * 100):
        fd.write(chunk)

网络问题不好重现,我测试的方法是,在本地使用python -m SimpleHTTPServer搭建服务端,然后用此代码下载大文件,然后手动关闭服务端,此代码并没有引发任何异常成功退出,下载的文件也是不完整的。

我希望这种不正常关闭连接能够触发异常处理,该如何做?

PHP中文网PHP中文网2711 天前835

全部回覆(2)我來回復

  • PHPz

    PHPz2017-04-18 09:29:20

    分段下,下完再拼起來就好了

    回覆
    0
  • ringa_lee

    ringa_lee2017-04-18 09:29:20

    只是驗證下載文件完整性的話可以在循環結束後驗證文件MD5值,不過實現要把源文件的MD5傳到連接裡,可以在工作目錄建立一個文本文件存下當前目錄所有文件的MD5值,再透過GET參數傳到requests裡,例如http://localhost/a.mp4?md5=xx...

    回覆
    0
  • 取消回覆