>  Q&A  >  본문

python - 抓取天猫详情页里面的月销量,反爬非常厉害

现在需要抓取天猫详情页里面的月销量
如https://detail.tmall.com/item...

已分析得到是异步js返回的数据,接口如下
https://mdskip.taobao.com/cor...


这个地址访问几次就需要登录,登录之后多访问几次就需要输入验证码
用代理换IP也一样
各位大神有啥好办法

天蓬老师天蓬老师2741일 전885

모든 응답(4)나는 대답할 것이다

  • ringa_lee

    ringa_lee2017-04-18 10:31:07

    로그인이 안되면 바로 상담원 변경

    프록시 전환 시 세션을 유지하지 마세요

    회신하다
    0
  • 巴扎黑

    巴扎黑2017-04-18 10:31:07

    입구를 얻으려면 모바일 단말기 입구를 선택할 수 있습니다. 예: 입구


    데이터가 페이지에 직접 나와 있어 데이터, 키워드 "sellCount"를 얻는 것이 매우 쉽습니다.

    회신하다
    0
  • 阿神

    阿神2017-04-18 10:31:07

    브라우저를 몇 번 방문하더라도 로그인하라는 메시지가 표시되지 않습니다. 코드를 사용하여 브라우저 플러그인을 조정하여 htmlunit에 액세스하세요

    Postman을 50번 사용한 후에도 여전히 로그인이 허용되지 않거나 인증 코드가 표시되지 않습니다. 다음 게시물에서는 Taobao의 크롤링 방지 기능이 여전히 평균 수준입니다.
    https://www.endclothing.com의 크롤링 방지 방법은 정말 끔찍합니다

    회신하다
    0
  • 天蓬老师

    天蓬老师2017-04-18 10:31:07

    혹시 이런 경험 있으신 분 계신가요?

    회신하다
    0
  • 취소회신하다