现在需要抓取天猫详情页里面的月销量
如https://detail.tmall.com/item...
已分析得到是异步js返回的数据，接口如下
https://mdskip.taobao.com/cor...
这个地址访问几次就需要登录，登录之后多访问几次就需要输入验证码
用代理换IP也一样
各位大神有啥好办法
巴扎黑2017-04-18 10:31:07
입구를 얻으려면 모바일 단말기 입구를 선택할 수 있습니다. 예: 입구
데이터가 페이지에 직접 나와 있어 데이터, 키워드 "sellCount"를 얻는 것이 매우 쉽습니다.
阿神2017-04-18 10:31:07
브라우저를 몇 번 방문하더라도 로그인하라는 메시지가 표시되지 않습니다. 코드를 사용하여 브라우저 플러그인을 조정하여 htmlunit에 액세스하세요
Postman을 50번 사용한 후에도 여전히 로그인이 허용되지 않거나 인증 코드가 표시되지 않습니다. 다음 게시물에서는 Taobao의 크롤링 방지 기능이 여전히 평균 수준입니다.
https://www.endclothing.com의 크롤링 방지 방법은 정말 끔찍합니다
