摘要:
本篇记录通过GO语言操作mongodb,实现的流程包括:初始化项目工程容、器方式安装mongo、调试运行和编译运行 阅读全文
摘要:
目前在做Python项目用到同步和异步的方法使用Redis单机,现在要增加兼容Redis集群。也就说当前项目用到中同步单机,同步集群,异步单机,异步集群都用到了。 阅读全文
摘要:
目前在全力开发一个模型训练相关的开源项目,该项目技术栈相当丰富,而且各种技术都是比较新,所以本系列拆解该开源项目的技术。 阅读全文
摘要:
《Python工匠》是一本案例、技巧与工程实践的指导书,本书不是python基础语法的教程,而是python中最佳实践的教程,属于python进阶类的书籍。可以将本书当做PEP8编程规范的补充,书中描述了很多python编程优雅的实践方法,既有广度也有深度,是python开发者值得反复阅读的书。我感叹于作者丰富的实践和广博的积累,从中获益良多。 阅读全文
摘要:
Gunicorn `Green Unicorn` 是一个 UNIX 下的 WSGI HTTP 服务器,它是一个 移植自 Ruby 的 Unicorn 项目的 pre-fork worker 模型。
Gunicorn启动项目之后一定会有一个主进程Master和一个或者多个工作进程。工作进程的数量可以指定。主进程是维护服务器的运行,工作进程是实际处理请求的进程。所有请求和响应均由 Worker 处理。
同步的 Worker 一次处理一个请求。 阅读全文
摘要:
从Python3.2开始,标准库为我们提供了`concurrent.futures` 模块,它提供了 `ThreadPoolExecutor` (线程池)和 `ProcessPoolExecutor` (进程池)两个类。
相比 `threading` 等模块,该模块通过 submit 返回的是一个 future 对象,它是一个未来可期的对象,通过它可以获取某一个线程执行的状态或者某一个任务执行的状态及返回值:
1. 主线程可以获取某一个线程(或者任务的)的状态,以及返回值。
2. 当一个线程完成的时候,主线程能够立即知道。 阅读全文
摘要:
python os模块 高频函数(未完待续) 阅读全文
摘要:
压测流程 首先启动 locust 压测脚本 然后启动bus查分模拟脚本 收集数据 压测结束,清理数据 采集的数据为: 请求相关数据,如响应时间,请求总数据量 资源相关,请求时pod的数量以及实时cpu,内存消耗 请求数量数量,总请求数量,时间分布 apm请求记录,查询请求具体耗时 数据库信息,记录网 阅读全文
摘要:
负载是指对被测系统不断施加某种特征的压力,直到性能指标超过预期或某项资源使用达到饱和,以验证系统的处理极限,为系统性能调优提供依据;
RPS:Requests Per Second 意思是 每秒发送请求数/吞吐率。指客户端每秒发出的请求数。在不单独讨论“事务”的情况下可以近似对应到Loadrunner/jmeter的TPS(Transaction Per Second, 每秒事务数)。 阅读全文
摘要:
wrk 是一款针对 Http 协议的基准测试工具,它能够在单机多核 CPU 的条件下,使用系统自带的高性能 I/O 机制,如 epoll,kqueue 等,通过多线程和事件模式,对目标机器产生大量的负载。 阅读全文