2019年9月12日
python 多进程数量 对爬虫程序的影响
摘要： 1. 首先看一下 python 多进程的优点和缺点 二： 测试服务器情况： cpu是12核心，内存是128G 三：测试目的： 测试目的是因为多进程 切换开销大，创建进程的代价大，通过开不同的进程数量，测试是否会出现进程开的越多，爬虫的速度越慢的情况。 四：测试软件条件： 1. 用10000个关键词， 阅读全文
posted @ 2019-09-12 13:16 淋哥 阅读(5388) 评论(0) 推荐(3) 编辑