python - scrapy的异常处理一般怎么做?

Question

发现在运行过程中有少量的请求有异常，或者请求响应了404 500之类的，又或者代码本身运行抛异常， 怎么记录这些异常呢。

Answer 1

私の現在のアプローチは、ダウンロード ミドルウェアを使用して失敗したリクエストをキャプチャすることです (参考までに)

リーリー

Answer 2

ログを通じて例外を記録しますか? Scrapyはログ機能を提供します

Answer 3

http://scrapy-chs.readthedocs.io/zh_CN/1.0/topics/logging.html