찾다

 >  Q&A  >  본문

python - scrapy는 실제로 항목을 입력하는 것보다 더 많은 페이지를 크롤링합니까?

으아악

스크래피를 사용하여 크롤링할 때 실제로 항목을 입력하는 것보다 더 많은 페이지를 방문하는 이유는 무엇입니까?
오랜 시간 동안 크롤링을 수행하면 항목에 데이터가 많지 않습니다.
해결 방법이 있습니까?

PHP中文网PHP中文网2779일 전679

모든 응답(1)나는 대답할 것이다

  • ringa_lee

    ringa_lee2017-05-18 10:49:40

    리디렉션됨 보시다시피 리디렉션을 위해서는 두 페이지를 요청해야 합니다. 또한 페이지 구문 분석 오류가 있는지 확인하세요.

    회신하다
    0
  • 취소회신하다