摘要: 异步爬虫 异步是在同一时间点多个任务共同进行,爬虫是抓取互联网数据,那么异步和爬虫能碰撞出怎样的火花? 提到异步后端开发的朋友们的反应肯定是线程协程等一系列概念,那么首先让我们介绍基于多线程的爬虫。 1.基于多线程的爬虫 既然我们要开启多线程那么就不得不用到线程池了,接下来我将用一个实例简单地介绍多 阅读全文
posted @ 2020-10-06 14:07 TopJocker 阅读(180) 评论(0) 推荐(0) 编辑