也可以将scrapy采集的数据输出到json文件,运行scrapy crawl blog -o items.json
本文主要介绍怎样将采集的数据存储到mongodb
首先配置setting.py文件里面的item pipelines
1 | # Configure item pipelines |
安装pymongo
conda install pymongo
修改pipelines.py文件
1 | import pymongo |
也可以将scrapy采集的数据输出到json文件,运行scrapy crawl blog -o items.json
本文主要介绍怎样将采集的数据存储到mongodb
首先配置setting.py文件里面的item pipelines
1 | # Configure item pipelines |
安装pymongo
conda install pymongo
修改pipelines.py文件
1 | import pymongo |
坚持原创技术分享,您的支持是我前进的动力!
去评论