摘要: 第一节:Scrapy框架架构 Scrapy框架介绍 写一个爬虫,需要做很多的事情。比如:发送网络请求、数据解析、数据存储、反反爬虫机制(更换ip代理、设置请求头等)、异步请求等。这些工作如果每次都要自己从零开始写的话,比较浪费时间。因此Scrapy把一些基础的东西封装好了,在他上面写爬虫可以变的更加 阅读全文
posted @ 2019-06-15 15:56 似水洋溢 阅读(289) 评论(0) 推荐(0) 编辑