scrapy(三)使用mongoDB

1.使用mongoDB必须已经安装mongoDB和pymongo

可以通过命令sudo pip install pymongo安装pymongo

 

2.settings.py

需要配置MongoDB的IP地址、端口号、数据记录名称,可以实现方便的更换MongoDB的数据库信息。引用pipelines.py从而使pipelines生效

 

3.pipelines.py

在pipelines中可以操作MongoDB的数据。操作的数据来自items。

 

4.运行测试,数据已经写到mongoDB

posted @ 2017-05-03 12:35  corolcorona  阅读(252)  评论(0编辑  收藏  举报