摘要: 1.scrapy:爬虫框架 -框架:集成了很多功能且具有很强通用性的一个项目模板 -如何学习框架:(重点:知道有哪些模块,会用就行) -学习框架的功能模板的具体使用. 功能:(1)异步爬取(自带buffer) (2)高性能的数据解析+持久化存储操作. 2.scrapy环境安装: 3.scrapy数据 阅读全文
posted @ 2019-05-31 22:38 studybrother 阅读(121) 评论(0) 推荐(0) 编辑
摘要: 1. 2.单线程多任务异步协程回顾 运行的得到下面的结果: <html> <head> <script> location.replace(location.href.replace("https://","http://")); </script> </head> <body> <noscript 阅读全文
posted @ 2019-05-31 21:37 studybrother 阅读(698) 评论(0) 推荐(0) 编辑