python - scrapy的异常处理一般怎么做?

Question

发现在运行过程中有少量的请求有异常，或者请求响应了404 500之类的，又或者代码本身运行抛异常， 怎么记录这些异常呢。

Answer 1

현재 접근 방식은 다운로드 미들웨어를 사용하여 실패한 요청을 캡처하는 것입니다. 참고용으로만 사용하세요

으아악

Answer 2

로그를 통해 예외사항을 기록하고 싶으신가요? Scrapy는 로그 기능을 제공합니다

Answer 3

http://scrapy-chs.readthedocs.io/zh_CN/1.0/topics/logging.html