Scrapy 中的 MongoDB 安装、使用、可视化入门
2016-04-19 10:03
567 查看
MongoDB 的安装
https://www.mongodb.org/downloadsmkdir data
mongod --dbpath ./data
MongoDB 的可视化插件安装
https://www.mongovue.com/pymongo 的安装
pip install pymongo或
easy_install pymongo
在程序中使用的代码骗子
import pymongoconnection = pymongo.MongoClient()
tdb = connection.Tianxiaoxiao #连接的名字叫Tianxiaoxiao 且不能为变量
post_info = tdb.test #test不能为变量,test为table
post_info.insert(xxx)
post_info.remove(xxx)
scrapy中配置MongoDB,我这里之说pipelins,有问题请评论
def __init__(self):host = settings['MONGODB_HOST']
port = settings['MONGODB_PORT']
dbName = settings['MONGODB_DBNAME']
client = pymongo.MongoClient(host=host, port=port)
tdb = Client[dbName]
self.post = tdb[settings['MONGODB_DOCNAME']]
def process_item(self, item, spider)
bookInfo = dict(item)
self.post.insrt(bookInfo)
return item
相关文章推荐
- MongoDB 一对多关系建模
- 10007---全文检索引擎Solr系列——整合MySQL、MongoDB
- MongoDB源码式安装
- MongoDB基本操作
- MongoDB - 简介和快速搭建
- MongoDB - 简介和快速搭建
- nodejs笔记五--MongoDB基本环境配置及增删改查;
- centos 64 安装mongodb
- Linux系统下MongoDB的简单安装与基本操作
- 修改mongodb3.0副本集用户密码遇到的坑
- mongodb中删除collections操作及其内容,释放空间
- MongoDB下载与配置安装
- mongodb入门很简单(3)
- mongoDB简单使用
- mongodb_查询操作使用_条件查询、where子句等(转并学习)
- MongoDB实现基于关键词的文章检索功能(C#版)
- window安装MongoDB并配置复制集
- MongoDB实现基于关键词的文章检索功能(C#版)
- mongoDB在centos7上的安装
- mongodb入门很简单(2)