摘要: 0. 建立housePro的scrapy爬虫框架 1. 用scrapy爬取网站信息 2. scrapy进行数据解析 调用parse的response参数,其中response对象可以直接调用xpath方法 3. scrapy的持久化存储 使用管道进行持久化流程 1.获取解析到的数据值 2.将解析到的 阅读全文
posted @ 2019-04-15 19:38 安智伟 阅读(176) 评论(0) 推荐(0) 编辑
摘要: MongoDB import pymongo # 1、连接MongoDB服务 mongo_py = pymongo.MongoClient() print(mongo_py) # 2、库和表的名字;有时间会自动建库建表 # 数据库 db = mongo_py['test2'] # 表、集合 coll 阅读全文
posted @ 2019-04-15 17:15 安智伟 阅读(197) 评论(0) 推荐(0) 编辑