2019年12月1日
爬虫5
摘要： 1 数据存储到mongodb（pipeline持久化） 深度优先和广度优先 ​ scrapy中通过队列和栈和优先级队列实现该方案 把地址存入数据库:如下4个地方需要操作 ​ settings配置，之后才能调度到pipeline中去执行 cnblogs.py items.py pipelines.py 阅读全文
posted @ 2019-12-01 20:45 xg1321 阅读(115) 评论(0) 推荐(0) 编辑