検索

ホームページ  >  に質問  >  本文

python - 微博爬虫抓取出现的连接问题?

使用cookie模拟登录微博后想抓取多页微博内容,只是抓取到第二页就出现错误,以前都没出现过,使用的是Request库来模拟登录和获取内容。
代码如下:

循环抓取在这里:

出现错误的代码如下:

我google过,有人说是因为requests发送http request占用太多connection资源,具体说明在
Python使用requests時遇到Failed to establish a new connection

巴扎黑巴扎黑2889日前402

全員に返信(1)返信します

  • 阿神

    阿神2017-04-17 17:56:35

    コードを取得します。ここには 10 ページのみがキャプチャされています。Cookie を自分で追加してください

    リーリー

    返事
    0
  • キャンセル返事