您好,登錄后才能下訂單哦!
小編給大家分享一下爬蟲數據保存到mongoDB的方法,希望大家閱讀完這篇文章后大所收獲,下面讓我們一起去探討方法吧!
爬蟲數據保存到mongoDB的方法:
import pymongo # 首先需要注意,mongodb數據庫存儲的類型是以鍵值對類型進行存儲,所以在存儲以前一定要進行數據篩選 def save_mongo(傳入的數據): # 創建連接 因為使用的為本機數據庫,所以IP寫localhost即可,端口號為27017 client = pymongo.MongoClient('localhost',27017) # 連接數據庫(這里注意一點,mongo數據庫有一個優點,就是當自己連接的數據庫和表都沒有的時候,會自動創建,所以不用擔心寫錯或者沒有表) db = client['自己創建數據庫名'] # 連接表 collection = db['自己的表名(mongo中叫做集合)'] # 插入到數據庫中(這里使用dict進行強制轉換,是為了保證數據為字典格式) collection.insert(dict(傳入的數據))
mongoDB介紹:
它的特點是高性能、易部署、易使用,存儲數據非常方便。主要功能特性有:
*面向集合存儲,易存儲對象類型的數據。
*模式自由。
*支持動態查詢。
*支持完全索引,包含內部對象。
*支持查詢。
*支持復制和故障恢復。
*使用高效的二進制數據存儲,包括大型對象(如視頻等)。
*自動處理碎片,以支持云計算層次的擴展性。
*支持 Golang,RUBY,PYTHON,JAVA,C++,PHP,C#等多種語言。
*文件存儲格式為BSON(一種JSON的擴展)。
*可通過網絡訪問。
看完了這篇文章,相信你對爬蟲數據保存到mongoDB的方法有了一定的了解,想了解更多相關知識,歡迎關注億速云行業資訊頻道,感謝各位的閱讀!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。