집 > Q&A > 본문
爬虫运行时一直是这样的每一分钟出现一条这样的信息,无限循环。不能爬取下来数据
这是redis服务端的显示
这样是什么问题,望有高手可以为我解惑,谢谢。
大家讲道理2017-04-18 10:34:53
scrapy_redis를 사용하여 스파이더가 크롤링할 URL을 배치해야 합니다. 예를 들어