会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
Coodsweet
温柔正确的人总是难以生存,因为这世界既不温柔,也不正确。 ——我的青春恋爱物语果然有问题
博客园
首页
新随笔
联系
订阅
管理
2021年10月15日
爬取某APP的数据
摘要: 好久没写博客了,也许人还处在迷茫状态一天浑浑噩噩的。最近写了一个爬虫脚本爬某APP的用户厂商数据,由于数据有12W+加上sleep的时间跑起来花费的时间很长。所以我将脚本分开写了先抓一级页面的请求参数再抓二级页面的详细数据,也可以将两个脚本合并,抓到的请求参数会存放在列表中在二脚本循环读取。数据量过
阅读全文
posted @ 2021-10-15 15:48 Fire_Li
阅读(692)
评论(0)
推荐(1)
编辑
公告