2017年11月10日
【转】Python爬虫(6)_scrapy框架
摘要： 官网链接：https://docs.scrapy.org/en/latest/topics/architecture.html 性能相关 在编写爬虫时，性能的消耗主要在IO请求中，当单进程单线程模式下请求URL时必然会引起等待，从而使得请求整体变慢。 import requests def fetc 阅读全文
posted @ 2017-11-10 15:48 hedeyong11 阅读(314) 评论(0) 推荐(0) 编辑