摘要: 利用scrapy抓取蛋壳公寓上的房源信息,以北京市为例,目标url:https://www.dankegongyu.com/room/bj 思路分析 每次更新最新消息,都是在第一页上显示,因此考虑隔一段时间自动抓取第一页上的房源信息,实现抓取最新消息。 利用redis的set数据结构的特征,将每次抓 阅读全文
posted @ 2018-06-08 20:03 温良Miner 阅读(1318) 评论(0) 推荐(0) 编辑
分享到: