同时运行多个scrapy爬虫的几种方法(自定义scrapy项目命令)
摘要:
Reference: http://www.cnblogs.com/rwxwsblog/p/4578764.html 试想一下,前面做的实验和例子都只有一个spider。然而,现实的开发的爬虫肯定不止一个。既然这样,那么就会有如下几个问题:1、在同一个项目中怎么创建多个爬虫的呢?2、多个爬虫的时候是 阅读全文
posted @ 2016-03-19 21:02 alex.shu 阅读(7217) 评论(0) 推荐(2) 编辑