首页  >  问答  >  正文

python - 抓取天猫详情页里面的月销量,反爬非常厉害

现在需要抓取天猫详情页里面的月销量
如https://detail.tmall.com/item...

已分析得到是异步js返回的数据,接口如下
https://mdskip.taobao.com/cor...


这个地址访问几次就需要登录,登录之后多访问几次就需要输入验证码
用代理换IP也一样
各位大神有啥好办法

天蓬老师天蓬老师2741 天前886

全部回复(4)我来回复

  • ringa_lee

    ringa_lee2017-04-18 10:31:07

    不登陆,直接换代理

    切换代理不要保持会话

    回复
    0
  • 巴扎黑

    巴扎黑2017-04-18 10:31:07

    获取入口可以选择移动端入口,例如:入口


    数据直接就在页面上,获取数据就很容易了,关键字"sellCount"

    回复
    0
  • 阿神

    阿神2017-04-18 10:31:07

    浏览器访问多少次都不会要求登录,用代码调浏览器插件访问htmlunit

    用postman刷了50次也不会让我登录或者出现验证码,自己下个post试试,淘宝的反爬还是一般般。
    https://www.endclothing.com用的反爬才真的见鬼

    回复
    0
  • 天蓬老师

    天蓬老师2017-04-18 10:31:07

    有没有大神有过经验?

    回复
    0
  • 取消回复