2018年11月29日
gerapy+scrapyd组合管理分布式爬虫
摘要： Scrapyd是一款用于管理scrapy爬虫的部署和运行的服务，提供了HTTP JSON形式的API来完成爬虫调度涉及的各项指令。Scrapyd是一款开源软件，代码托管于Github上。 点击此链接https://scrapyd.readthedocs.io/en/stable/阅读官方文档。Ger 阅读全文
posted @ 2018-11-29 13:29 迷茫的小草 阅读(964) 评论(0) 推荐(0) 编辑