2018年7月2日
爬虫--scrapy框架
摘要： twisted介绍 Twisted是用Python实现的基于事件驱动的网络引擎框架，scrapy正是依赖于twisted,从而基于事件循环机制实现爬虫的并发。 scrapy的项目结构目录 文件说明： scrapy.cfg 项目的主配置信息。（真正爬虫相关的配置信息在settings.py文件中） i 阅读全文
posted @ 2018-07-02 10:51 2009_boy 阅读(252) 评论(0) 推荐(0) 编辑