python - 代理导致Scrapy无法访问网站？

Question

今天用文档学习Scrapy的时候，第一个程序爬取stackoverflow的时候出现了问题。猜测原因是用了Lanten作为代理，因为在Scrapy所打印的信息中有一句是：“ [scrapy] DEBUG: Telnet console listening on 127.0.0.1:60...

大家讲道理 · Answer

랜턴 꺼주세요~

巴扎黑 · Answer

답변 출처 주소: CSDN 블로그: Scrapy 사용 문제

답변 끝에 프록시 문제로 인해 일부 웹사이트에 액세스할 수 없다고 언급되어 있습니다. 해결 방법은 settings.py에서 이를 수정하는 것입니다.
DOWNLOADER_MIDDLEWARES = {

으아악

}

테스트 및 수정 후 프로그램 실행 가능

PHP中文网 · Answer

Lanten이 시스템 프록시를 변경하여 크롤러가 액세스하려면 이 프록시 IP를 사용해야 합니다.