搜尋

首頁  >  問答  >  主體

python - 开启猴子补丁后,requests 库在请求时是否是阻塞整个程序的?

在 v2ex 上提问。有人说使用 Gevent 并开启猴子补丁,如果一个线程阻塞也是会影响整个程序线程的。
但我测试 20 个 get 任务时:

但,1000 个任务,使用 多线程明显比多协程快 30% 左右。这是不是因为某个协程的 requests.get 阻塞的整个线程呢?
另问:在做一个线上持续运行的爬虫时,应该如何分配进程、线程、携程才能使带宽、硬件有最佳使用率呢?


条件:python 2.7.8

高洛峰高洛峰2767 天前375

全部回覆(1)我來回復

  • PHPz

    PHPz2017-04-17 13:51:03

    當並發任務上時,協程的優勢就體現出來了~
    協程並不比線程快,但在超高並發的情況下,比多線程穩定,佔資源少。

    回覆
    0
  • 取消回覆