2017年9月10日

多线程发送请求方式对比

摘要: 在编写爬虫时,性能的消耗主要在IO请求中,当单进程单线程模式下请求URL时必然会引起等待,从而使得请求整体变慢。 1. 同步执行import requests def fetch_async(url): response = requests.get(url) return response url 阅读全文

posted @ 2017-09-10 21:48 niansi 阅读(334) 评论(0) 推荐(0) 编辑

导航