python - scrapy는 데이터를 크롤링할 수 없으며 txt 파일을 생성할 수 없습니다.

曾经蜡笔没有小新2732일 전904

Question

(www.sf.gg)는 중국 최고의 개발자 기술 커뮤니티입니다. 프로그래밍 매니아들을 위한 순수하고 수준 높은 기술 교류 플랫폼을 제공하고, 개발자들과 함께 배우고 소통하며 성장하며 개발자들을 위한 시대를 만들어 나가고자 합니다!

phpcn_u1582 · Answer

xpath 파싱 경로에 문제가 있습니다. 모두 감사합니다

天蓬老师 · Answer

글쓰기 모드에 문제가 있는 것 같습니다. ab를 사용해 보세요.

大家讲道理 · Answer

Linux에서 실행되나요? 권한 문제가 있나요?

代言 · Answer

로그 출력을 보면 robots.txt를 만났을 때 scrapy가 일찍 종료된 것 같습니다. 설정에서 ROBOTSTXT_OBEY를 ROBOTSTXT_OBEY = False로 변경해 보세요. 그래도 작동하지 않으면 중지하고 디버그하세요

python - scrapy는 데이터를 크롤링할 수 없으며 txt 파일을 생성할 수 없습니다.