某查查app爬虫

最近闲来无聊,接到一个面试题,爬某查查新增企业数据
乍一看很简单哇,打开网页,一顿操作猛如虎,一看战绩,这怎么限制了,网页版只有100条数据,打开app看下,新增企事业数据这么多,但是得开会员啊。在这里插入图片描述

淘宝买吧,买好之后就开始搞,各种手段,安卓模拟器抓包,模拟各种参数,
这次真的是一顿操作猛如虎啊。

{'Value': 1101, 'Desc': '北京市', 'Count': 6725, 'provinceName': '北京', 'provinceCode': 'BJ'}
{'Value': 3401, 'Desc': '合肥市', 'Count': 7917, 'provinceName': '安徽', 'provinceCode': 'AH'}
这是要用到城市信息
{'name': '甘肃', 'province': 'GS', 'cityCode': '', 'hasNext': True}
{'name': '广东', 'province': 'GD', 'cityCode': '', 'hasNext': True}
{'name': '广西', 'province': 'GX', 'cityCode': '', 'hasNext': True}
省份信息

数据目前不是很全,只有公司名称,创建时间,地址等,后期还要努力努力,多多学习,
这些数据只用于学习。
在这里插入图片描述
github链接

posted @ 2019-11-27 10:33  成小新  阅读(183)  评论(0编辑  收藏  举报