suchen

Heim  >  Fragen und Antworten  >  Hauptteil

python - 抓取天猫详情页里面的月销量，反爬非常厉害

现在需要抓取天猫详情页里面的月销量
如https://detail.tmall.com/item...

已分析得到是异步js返回的数据，接口如下
https://mdskip.taobao.com/cor...


这个地址访问几次就需要登录，登录之后多访问几次就需要输入验证码
用代理换IP也一样
各位大神有啥好办法

天蓬老师天蓬老师2785 Tage vor918

Antworte allen(4)Ich werde antworten

  • ringa_lee

    ringa_lee2017-04-18 10:31:07

    不登陆，直接换代理

    切换代理不要保持会话

    Antwort
    0
  • 巴扎黑

    巴扎黑2017-04-18 10:31:07

    获取入口可以选择移动端入口，例如：入口

    数据直接就在页面上，获取数据就很容易了，关键字"sellCount"。

    Antwort
    0
  • 阿神

    阿神2017-04-18 10:31:07

    浏览器访问多少次都不会要求登录，用代码调浏览器插件访问htmlunit

    用postman刷了50次也不会让我登录或者出现验证码，自己下个post试试，淘宝的反爬还是一般般。
    https://www.endclothing.com用的反爬才真的见鬼

    Antwort
    0
  • 天蓬老师

    天蓬老师2017-04-18 10:31:07

    有没有大神有过经验？

    Antwort
    0
  • StornierenAntwort