首頁  >  問答  >  主體

Python:使用scrapy下载网站数据

问题描述

我想使用scrapy下载网站数据,并且以原目录结构进行保存,以便可以直接在本地访问,
请问有类似的代码可以参考吗?
注:刚接触scrapy,很多资源不知道在哪里找

大家讲道理大家讲道理2716 天前240

全部回覆(2)我來回復

  • 大家讲道理

    大家讲道理2017-04-17 12:05:24

    覺得scrapy的文件不錯,可能開始不太習慣回調。

    http://doc.scrapy.org/en/latest/intro/tutorial.html

    有人寫了幾個例子,不過沒看過,不知道如何。

    https://github.com/geekan/scrapy-examples

    個人覺得先給文件過一遍,最起碼上面的tutorial那個簡單的例子先看遍,之後會順手很多。

    回覆
    0
  • 天蓬老师

    天蓬老师2017-04-17 12:05:24

    有個部落格裡面講了很多scrapy的技術,建議去看看,http://tech.my-coffees.com

    回覆
    0
  • 取消回覆