摘要：
一、概述 requests 作者开发，集成 pyppeteer。 最近爬虫遇到的情况是，爬取的网站使用JavaScript渲染的，网站爬取的结果只有一堆JS代码。之前遇到这种情况的处理办法是用Splash(一般是配合Scrapy)，或者Selenium来爬取，介绍一下常用的模拟浏览器执行，来爬去js 阅读全文
摘要：
一、概述 asyncio 是用来编写 并发 代码的库，使用 async/await 语法。 asyncio 被用作多个提供高性能 Python 异步框架的基础，包括网络和网站服务，数据库连接库，分布式任务队列等等。 asyncio 往往是构建 IO 密集型和高层级 结构化 网络代码的最佳选择。 as 阅读全文
摘要：
一、概述 现有一台服务器，需要部署mysql。其中mysql容器，需要在第一次启动时，执行多个sql文件。 注意：必须严格按照执行顺序来执行，不能错乱。 有些人可能会问：为啥不把这3个sql文件合并成1个sql？答案是可以的。假设有上万个用户，那么这个sql文件就会很大，后期维护不方便。 那么可不可 阅读全文
摘要：
一、概述 有一台堡垒机，可以连接到后端几台服务器。开发人员需要登录到后端服务器，使用tail -f查看实时日志。 但是敲命令比较繁琐，需要有一个管理平台来实现日志下载以及查看实时日志功能。 二、项目演示 github完整代码如下： https://github.com/py3study/real_t 阅读全文
摘要：
一、概述 最近用django写了一个后台系统，使用的是验证码方式。但是开发人员抱怨，输入验证太麻烦，还有可能出错，太影响效率了。 是否可以用滑动验证码，一拖动就可以了！ 网上大部分文章，用的是极验GeeTest，需要你自己注册账号，才能使用。官网： https://www.geetest.com/ 阅读全文
摘要：
一、概述 OmniDB是一个基于浏览器的工具，它简化了专注于交互性的数据库管理，旨在实现在Web端强大的数据库管理功能且是轻量级的，目前支持PostgreSQL、Oracle、MySQL / MariaDB，未来应该会支持Firebird、 SQLite、Microsoft SQL Server、I 阅读全文
摘要：
一、概述 手工搭建 Kubernetes 集群是一件很繁琐的事情，为了简化这些操作，就产生了很多安装配置工具，如 Kubeadm ，Kubespray，RKE 等组件，我最终选择了官方的 Kubeadm 主要是不同的 Kubernetes 版本都有一些差异，Kubeadm 更新与支持的会好一些。Ku 阅读全文
摘要：
一、概述 Portainer是Docker的图形化管理工具，提供状态显示面板、应用模板快速部署、容器镜像网络数据卷的基本操作（包括上传下载镜像，创建容器等操作）、事件日志显示、容器控制台操作、Swarm集群和服务等集中管理和操作、登录用户管理和控制等功能。功能十分全面，基本能满足中小型单位对容器管理 阅读全文
摘要：
一、概述 docker-compose可以方便组合多个 docker 容器服务, 但是, 当容器服务之间存在依赖关系时, docker-compose 并不能保证服务的启动顺序。docker-compose 中的 depends_on 配置是容器的启动顺序, 并不是容器中服务的启动顺序。本章将详细叙 阅读全文
摘要：
一、概述 现有一台服务器，需要部署mysql和redis。其中mysql容器，需要在第一次启动时，执行sql文件。 redis保持空数据即可。 关于Docker-compose的安装，请参考连接： https://www.cnblogs.com/xiao987334176/p/12377113.ht 阅读全文