2018年5月12日
摘要: 在系统学习Scrapy前我们首先在看一个实际的项目,从宏观上把握下Scrapy爬虫框架的流程(填空题训练开始了,小伙伴们准备好了吗?): 这里我选取了百度阅读,我们来爬取所有新书榜的书单包括其书名;评分;出版商;价格信息 /目标站点:https://yuedu.baidu.com/rank/newb 阅读全文
posted @ 2018-05-12 16:26 疾风_lu 阅读(640) 评论(0) 推荐(0) 编辑
摘要: 1、What is Scrapy? 答:Scrapy是一个使用python语言(基于Twistec框架)编写的开源网络爬虫框架,其结构清晰、模块之间的耦合程度低,具有较强的扩张性,能满足各种需求。(前面我们介绍了使用requests、beautifulsoup、selenium等相当于你写作文题,主 阅读全文
posted @ 2018-05-12 15:44 疾风_lu 阅读(2852) 评论(0) 推荐(0) 编辑