会员
周边
众包
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
https://pic.cnblogs.com/avatar/1285461/20190710101247.png
学一点也是好
焚膏油以继晷,恒兀兀以穷年。
博客园
首页
新随笔
联系
订阅
管理
2019年9月12日
一次使用scrapy的问题记录
摘要: 前景描述: 需要获取某APP的全国订单量,及抢单量。由于没有全国的选项所以只能分别对每一个城市进行订单的遍历。爬虫每天运行一次,一次获取48小时内的订单,从数据库中取出昨天的数据进行对比,有订单被抢则更新,无则不操作。(更新逻辑在这里不重要,重要的是爬取逻辑)。每个订单有发布时间, 根据发布时间判断
阅读全文
posted @ 2019-09-12 22:01 学一点也是好
阅读(307)
评论(0)
推荐(0)
编辑
公告