pyspider 有没有类似scrapy的文件图片下载功能 或者有什么插件可以实现这个功能？

Question

pyspider 有没有类似scrapy的文件图片下载功能 或者有什么插件可以实现这个功能？现在正在做scrapy到pyspider的迁移

Answer 1

和网页一样 self.crawl(image_url, callback=self.image_save) 提交抓取，写一个 image_save 将 response.content 写到你需要的地方即可。

如果是大规模图片下载，建议单独写一个下载器。

Answer 2

好像没有这个功能图片用 urllib 的 urlretrieve 实现下载到本地？