摘要: Scrapy是一个专业的、高效的爬虫框架,它使用专业的Twisted包(基于事件驱动的网络引擎包)高效处理网络通信,使用lxml(专业的XML处理包)、cssselect高效地提取HTML页面的有效信息,同时它也提供了有效的线程管理一、安装Scrapy: pip3 install scrapy二、创 阅读全文
posted @ 2019-05-21 01:02 #独狼 阅读(438) 评论(0) 推荐(0) 编辑