搜尋

首頁  >  問答  >  主體

pyspider +mongodb 多個爬蟲 result 如何指定 collection 名稱

如題,我現在需要爬取多個網站的內容,但是結果結構是一樣的。現在的配置resultdb 是一個db,每個爬蟲的結果分別是不同的集合。而我想把這些結果存到指定db下的指定集合,這個如何設定。請大俠幫我解答。

过去多啦不再A梦过去多啦不再A梦2875 天前1010

全部回覆(1)我來回復

  • 怪我咯

    怪我咯2017-04-28 09:07:44

    自備的 resultdb 只是用來展示 preview 結果的,如果你改變了結構,這個功能就無效了。所以你需要拿到結果後,自己就建庫自己處理怎麼儲存。

    http://docs.pyspider.org/en/latest/Working-with-Results/

    回覆
    0
  • 取消回覆