2019年7月16日
Scrapy框架
摘要： Scrapy框架介绍 写一个爬虫，需要做很多的事情，比如：发送网络请求、数据解析、数据存储、反反爬虫机制(ip代理，设置请求头等)、异步请求等等。这些工作如果每次都要自己从零开始写的话，比较浪费时间。因此scrapy把一些基础的东西都封装好了，在scrapy框架上开发爬虫可以变得更加的高效，爬取效率 阅读全文
posted @ 2019-07-16 19:51 阿星Plus 阅读(278) 评论(0) 推荐(0) 编辑