首頁 >後端開發 >Python教學 >Python 中使用 MongoDB 儲存爬蟲數據

Python 中使用 MongoDB 儲存爬蟲數據

大家讲道理
大家讲道理原創
2016-11-09 11:20:361274瀏覽

現在正在做一個簡單的搜尋引擎,使用今日頭條的新聞資料作為資料來源。這些資料都是非結構性的,比較適合用 MongoDB 來進行儲存。

以下為簡單使用的範例。

#!/usr/bin/python
# -*- coding:utf-8 -*-
 
import pymongo
 
class documentManager(object):
    def __init__(self):
        pass
 
    def connect_mongo(self):
        client = pymongo.Connection("127.0.0.1",27017)
        db = client.data_db
        collection = db.data_collection
        mydict = {"name":"Lucy", "sex":"female","job":"nurse"}
        collection.insert(mydict)
 
        for i in collection.find({"name":"Lucy"}):
            print i
 
if __name__ == '__main__':
    manager = documentManager()
    manager.connect_mongo()


陳述:
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn