2018年12月19日
杂乱无章的scrapy细碎知识
摘要： 1. 2. Scrapy优势：用户只需要定制开发几个模块就可以轻松的实现一个爬虫，用来抓取网页内容及图片。非常方便，另外它使用了Twisted这个异步网络框架来处理网络通讯，不用我们自己实现异步框架，除此之外，它还包含了各种中间件接口，可以灵活的实现各种需求。 3. 图片下载setting配置 : 阅读全文
posted @ 2018-12-19 17:40 陈桑啊丶 阅读(353) 评论(0) 推荐(0) 编辑