摘要: scrapyd是一个用于部署和运行scrapy爬虫的程序,它允许你通过JSON API来部署爬虫项目和控制爬虫运行 概览 项目和版本 scrapyd可以管理多个项目,并且每个项目允许有多个版本,但是只有最新的版本会被用来运行爬虫. 最方便的版本管理就是利用VCS工具来记录你的爬虫代码,版本比较不是简 阅读全文
posted @ 2021-12-20 10:25 码哥之旅 阅读(1177) 评论(0) 推荐(0) 编辑