随笔分类 -  爬虫

scrapyd api接口介绍
摘要:scrapyd API接口,这里使用postman工具调用,每个接口都添加了scrapyd服务需要的Basic Auth类型用户名和密码。 1.daemonstatus.json接口 检查服务的负载状态 get请求,传参无 #get请求 http://120.xx.xxx.xxx:6800/daem 阅读全文

posted @ 2022-07-26 15:16 花阴偷移 阅读(414) 评论(0) 推荐(0) 编辑

爬虫部署 Gerapy 安装(centos 8)演示
摘要:一.安装 pip3 install -U gerapy 使用python3.68版本安装gerapy,报错提示:ModuleNotFoundError: No module named 'setuptools_rust' 解决方法更新pip3 pip3 install --upgrade pip 安 阅读全文

posted @ 2022-07-22 16:29 花阴偷移 阅读(620) 评论(0) 推荐(0) 编辑

导航

点击右上角即可分享
微信分享提示