摘要: import pandas as pd import matplotlib.pyplot as plt import pymongo %matplotlib inline # 连接mongodb数据库 client = pymongo.MongoClient("localhost") # 连接数据库 db = client["lianjia"] # 数据表 fangyuan = db["fang... 阅读全文
posted @ 2018-12-06 19:33 L某人 阅读(3056) 评论(0) 推荐(1) 编辑
摘要: ## 一、scrapy框架的每个模块的用途1、spiders:自定义爬虫定义允许爬取的范围定义开始爬取的urlparse:一定要重写start_request:一般不需要重写,可以通过重写start_request进行模拟登陆2、items1)定义爬取的items域,是一个类字典的一个对象如果在爬虫 阅读全文
posted @ 2018-12-06 19:26 L某人 阅读(1075) 评论(0) 推荐(0) 编辑