Scrapy实战篇(九)之爬取链家网天津租房数据

  以后有可能会在天津租房子,所以想将链家网上面天津的租房数据抓下来,以供分析使用。

  思路:

  1、以初始链接https://tj.lianjia.com/zufang/rt200600000001/?showMore=1(因为我只关心整租的房间)开始,首先获取每个行政区对应的链接。

  2、在以每个区的链接,例如:https://tj.lianjia.com/zufang/heping/rt200600000001/,和平区整租房间起始也,获取下面每个房间的链接。

  3、解析每个房间的页面,获取详细数据。

 完整代码链接:https://gitee.com/liangxinbin/Scrpay/tree/master/scrapylijia

posted on 2019-03-02 19:14  liangxb  阅读(699)  评论(0编辑  收藏  举报