摘要: 在脚本中运行 Scrapy 除了常用的 scrapy crawl 来启动 Scrapy,也可以使用 API 在脚本中启动 Scrapy。 需要注意的是,Scrapy 是在 Twisted 异步网络库上构建的,因此其必须在 Twisted reactor 里运行。 另外,在 spider 运行结束后, 阅读全文
posted @ 2016-09-23 10:18 sufei 阅读(644) 评论(0) 推荐(0) 编辑