検索

ホームページ  >  に質問  >  本文

python - 抓取天猫详情页里面的月销量,反爬非常厉害

现在需要抓取天猫详情页里面的月销量
如https://detail.tmall.com/item...

已分析得到是异步js返回的数据,接口如下
https://mdskip.taobao.com/cor...


这个地址访问几次就需要登录,登录之后多访问几次就需要输入验证码
用代理换IP也一样
各位大神有啥好办法

天蓬老师天蓬老师2785日前917

全員に返信(4)返信します

  • ringa_lee

    ringa_lee2017-04-18 10:31:07

    ログイン不要、エージェントを直接変更

    プロキシを切り替えるときにセッションを維持しないでください

    返事
    0
  • 巴扎黑

    巴扎黑2017-04-18 10:31:07

    入口を取得するには、モバイル端末の入口を選択できます。例:入口


    データはページ上に直接表示され、データやキーワードを簡単に取得できます"sellCount"

    返事
    0
  • 阿神

    阿神2017-04-18 10:31:07

    ブラウザに何度アクセスしても、ログインは求められません。コードを使用してブラウザのプラグインを調整し、htmlunitにアクセスします

    Postman を 50 回試しましたが、まだログインできず、認証コードも表示されません。次回の投稿で試してみます。
    https://www.endclothing.com が逆クロールを使用している場合は本当にひどいです

    返事
    0
  • 天蓬老师

    天蓬老师2017-04-18 10:31:07

    これを経験した人はいますか?

    返事
    0
  • キャンセル返事