2020年2月9日
摘要: scrapy框架1.scrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架,使用了Twisted(扭曲)异步网络框架,可以加快下载是速度。同步异步(过程) 阻塞非阻塞(状态) 2.工作流程:scheduler(调度器)里面存放request对象,这个对象里有url地址scrapy eng 阅读全文
posted @ 2020-02-09 20:50 啥123 阅读(149) 评论(0) 推荐(0) 编辑