摘要: 爬虫代理 IP 池及隧道代理 日常开发中,偶尔会遇到爬取网页数据的需求,为了隐藏本机真实 IP,常常会用到代理 IP 池,本文将基于 openresty 与代理 IP 池搭建更为易用的隧道代理。 1. 代理 IP 池 1.1 简介 代理 IP 池即在数据库中维护一个可用的 IP 代理队列,一般实现思 阅读全文
posted @ 2022-05-24 13:22 Hit不死的小强 阅读(1243) 评论(2) 推荐(1) 编辑
摘要: Docker-compose下载国内源加速(2021.1.15) 在使用 Docker-compose 官方提供的源进行下载时速度比较慢,因此需要配置国内源进行加速。下面以 Ubuntu20.04 和 Docker-compose1.27.4 为例演示 Docker-compose 配置国内源加速下 阅读全文
posted @ 2021-07-18 10:44 Hit不死的小强 阅读(2798) 评论(0) 推荐(1) 编辑
摘要: Docker 配置国内源加速(2021.1.15) Docker 在拉取镜像时使用默认源速度会比较慢,因此需要配置国内镜像源进行加速。下面以 Ubunut16.04 和 Docker20.10.2 为例演示 Docker 配置国内源加速的过程。 1. 修改配置文件 Docker 的配置文件在为 /e 阅读全文
posted @ 2021-07-18 10:41 Hit不死的小强 阅读(318) 评论(0) 推荐(0) 编辑