検索

ホームページ  >  に質問  >  本文

我要在命令行同时不间断地运行八九个python爬虫程序(爬不同的网站)?

但是过一段时间总有一两个程序会无响应,好像是被挂起了,CPU占用率并不高,不到10%,内存占用也不算多,60%左右,爬虫程序是去批量下载文件,平均每个几兆到十几兆。我设置了这几个程序的优先级高于普通标准,但是还是会出现无响应的状况。版本 python 2.7

求问:这个问题算不算进程被挂起?以及应该如何解决这个问题?

谢谢!

迷茫迷茫2785日前625

全員に返信(2)返信します

  • 阿神

    阿神2017-04-18 10:30:03

    この種の問題は自分で解決し、さらにログを記録する必要があります

    返事
    0
  • ringa_lee

    ringa_lee2017-04-18 10:30:03

    PythonにはGILがあります

    返事
    0
  • キャンセル返事