会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
neumy
这里居住着一只小白
博客园
首页
新随笔
联系
订阅
管理
2020年5月4日
BUFF和steam的CSGO饰品价格爬取的优化改进
摘要: 前些天在CSDN上看见某dalao的buff开源爬虫,没有上代理,config也只能在.ini里改,爬2000个商品花了很久 想着能不能改一下,就改了一下 。增加了从快代理上的动态爬取到的proxy 。发现proxy在requests下好用一些。 。后来又增加了利用logging模块的set方法来实
阅读全文
posted @ 2020-05-04 22:18 neumy
阅读(1843)
评论(0)
推荐(0)
编辑
公告