python 多线程的使用
在开发etl的过程中,之前串行执行sql脚本速度有点慢,计划转换成并行,这里需要使用py的多线程模式
核心在于py的 multiprocessing 模块,下面是我抄过来别人的代码:
import multiprocessing
import time
#跳舞任务
def dance():
for i in range(5):
print("跳舞中...")
time.sleep(1)
#唱歌任务
def sing():
for i in range(5):
print("唱歌中...")
time.sleep(1)
if __name__ == '__main__':
# 创建跳舞的子进程
# group: 表示进程组,目前只能使用None
# target: 表示执行的目标任务名(函数名、方法名)
# name: 进程名称, 默认是Process-1, .....
dance_process = multiprocessing.Process(target=dance, name="myprocess1")
sing_process = multiprocessing.Process(target=sing)
# 启动子进程执行对应的任务
dance_process.start()
sing_process.start()
print('-------------------------------')
#for i in range(5):
# #dance_process.start() 测试失败 一个线程只能被调用一次
# #sing_process.start()
# print('-------------------------------')
#计划:根据作业配置表中的作业名 生成多个对应线程,此步骤需要py执行,每个线程用来执行对应的sql脚本,线程之间有依赖关系
分类:
python
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 无需6万激活码!GitHub神秘组织3小时极速复刻Manus,手把手教你使用OpenManus搭建本
· C#/.NET/.NET Core优秀项目和框架2025年2月简报
· Manus爆火,是硬核还是营销?
· 终于写完轮子一部分:tcp代理 了,记录一下
· 【杭电多校比赛记录】2025“钉耙编程”中国大学生算法设计春季联赛(1)