进程&线程(三):外部子进程subprocess、异步IO、协程、分布式进程
1、外部子进程subprocess
python之subprocess模块详解--小白博客 - 夜风2019 - 博客园
python subprocess模块 - lincappu - 博客园
之前所说子进程的代码实现都是在主进程内部的,然而很多时候,子进程都是一个外部进程,我们需要控制子进程的输入与输出。
subprocess模块使我们可以非常方便地启动一个外部子进程,然后控制其输入与输出。
例子
通过在Python脚本中写代码,来达到和命令行运行相同的效果(相当于另外开了一个线程):
nslookup www.python.org
代码:
import subprocess print('$ nslookup www.python.org') r=subprocess.call(['nslookup','www.python.org']) print('Exit Code',r)
如果进程还需要传入一些参数,可以通过communicate()方法输入。
2、异步IO、协程
目的是解决CPU与IO之间速度不匹配的问题。虽然多线程/多进程是解决方法之一,但是创建太多进程/线程,那么CPU就会花费较多时间用于进程切换。所以可以采用另一种方法异步IO——当代码需要执行一个耗时的IO时,它只发出IO指令而不等待IO结果,然后就去执行其他代码了。一段时间后,当IO返回结果时,再通知CPU进行处理。
我们按照普通代码的方式是无法写出异步IO模型的。
异步IO需要一个消息循环,在消息循环中,主线程不断重复“读取消息——处理消息”这一过程:
loop=get_event_loop() while True: event=loop.get_event() process_event(event)
3、分布式进程
学习自:
Process可以分布到多台机器上,而Thread只能分布到同一台机器上的多个CPU中。
multiprocessing模块支持多进程,其中的managers子模块支持把多进程分布到多台机器上。
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】凌霞软件回馈社区,博客园 & 1Panel & Halo 联合会员上线
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】博客园社区专享云产品让利特惠,阿里云新客6.5折上折
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 浏览器原生「磁吸」效果!Anchor Positioning 锚点定位神器解析
· 没有源码,如何修改代码逻辑?
· 一个奇形怪状的面试题:Bean中的CHM要不要加volatile?
· [.NET]调用本地 Deepseek 模型
· 一个费力不讨好的项目,让我损失了近一半的绩效!
· PowerShell开发游戏 · 打蜜蜂
· 在鹅厂做java开发是什么体验
· 百万级群聊的设计实践
· WPF到Web的无缝过渡:英雄联盟客户端的OpenSilver迁移实战
· 永远不要相信用户的输入:从 SQL 注入攻防看输入验证的重要性