Scrapy实战篇(九)之爬取链家网天津租房数据
以后有可能会在天津租房子,所以想将链家网上面天津的租房数据抓下来,以供分析使用。
思路:
1、以初始链接https://tj.lianjia.com/zufang/rt200600000001/?showMore=1(因为我只关心整租的房间)开始,首先获取每个行政区对应的链接。
2、在以每个区的链接,例如:https://tj.lianjia.com/zufang/heping/rt200600000001/,和平区整租房间起始也,获取下面每个房间的链接。
3、解析每个房间的页面,获取详细数据。
完整代码链接:https://gitee.com/liangxinbin/Scrpay/tree/master/scrapylijia
作者: liangxb
出处:https://www.cnblogs.com/lxbmaomao/
本文版权归作者和博客园共有,欢迎转载,但未经作者同意必须保留此段声明,且在文章页面明显位置给出原文连接,否则保留追究法律责任的权利。