docker常用命令
摘要：
docker load docker images docker save 阅读全文
posted @ 2021-05-03 17:31 吉阿吉 阅读(18) 评论(0) 推荐(0) 编辑
docker分布式爬虫搭建
摘要：
一、基础镜像 参考《精通Python网络爬虫》机械工业出版社 二、实现中心节点并配置Redis与MySql docker run -tid --name ceter c354 #创建中心节点 docker ps -a #查看详情 docker attch 2eaf #进入中心节点 cat /etc/ 阅读全文
posted @ 2021-05-03 16:38 吉阿吉 阅读(103) 评论(0) 推荐(0) 编辑
scrapy各管道存储模板
摘要：
一、csv文件存储 class CsvPipeline(): def open_spider(self,spider): self.file=open('filename.csv','wb') self.csv_exporter=CsvItemExporter(self.file) self.csv 阅读全文
posted @ 2021-05-03 15:52 吉阿吉 阅读(69) 评论(0) 推荐(0) 编辑
