会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
Pengzquan
博客园
首页
新随笔
联系
订阅
管理
2020年7月20日
爬虫神器——异步爬虫
摘要: 一、背景 有一个项目需要使用到爬虫,因此去Google上搜索了一下,发现除了requests,scrapy,多线程,多进程以外,还有一种方法异步爬虫。使用aiohttp+async来进行网站的爬取。 二、使用 通过以下的指令安装 # 通过指令安装aiohttp pip install aiohttp
阅读全文
posted @ 2020-07-20 20:49 蔚蓝色の天空
阅读(542)
评论(0)
推荐(0)
编辑