协程(gevent模块)

协程

1、什么是协程

  进程:资源单位  

  线程:执行单位

 

  协程:是单线程下的并发,又称微线程,纤程。即单线程可以通过协程来实现并发。

  PS:协程是一种用户态的轻量级线程,即协程是由用户程序自己控制调度的。

 

 

2、协程的优缺点

  优点:

    1)协程的切换开销更小,属于程序级别的切换,操作系统完全感知不到,因而更加轻量级

    2)单线程内就可以实现并发的效果,最大限度地利用cpu

  缺点:

    1)协程的本质是单线程下,无法利用多核,可以是一个程序开启多个进程,每个进程内开启多个线程,每个线程内开启协程

    2)协程指的是单个线程,因而一旦协程出现阻塞,将会阻塞整个线程

 

 

3、协程的特点

  1)必须在只有一个单线程里实现并发

  2)修改共享数据不需加锁

  附加:一个协程遇到IO操作会进行“自动切换+保存状态”,并且切换到其它协程(通过gevent模块可以做到“切换+保存状态”)

 

 

4、gevent模块

  gevent模块是一个第三方模块,需要下载安装gevent库

pip3 install gevent

  用法:

    g1 = gevent.spawn(函数名, 参数1, 参数2, 参数3...)  # 创建一个协程对象

    gevent.joinall([g1, g2, g3])  # 遇到IO阻塞时会自动在 [g1, g2, g3] 中切换任务

    monkey.patch_all()  # 必须放到被打补丁者的前面,如time,socket模块之前(可以记忆成要用gevent,需要将from gevent import monkey和monkey.patch_all()放到文件的开头)

 

  代码演示:

from gevent import monkey    # 猴子补丁
monkey.patch_all()    # 监听所有的任务是否有IO操作,如果有就切换。必须写在最上面,这句话后面的所有阻塞全部能够被识别到

from gevent import spawn    # spawn(函数名, 参数1, 参数2, 参数3...)
from gevent import joinall    # 等同于start和join的作用
import time


def task1():
    print("start from task1...")
    time.sleep(1)
    print("end from task1...")


def task2():
    print("start from task2...")
    time.sleep(3)
    print("end from task2...")


def task3():
    print("start from task3...")
    time.sleep(5)
    print("end from task3...")


if __name__ == '__main__':
    start_time = time.time()
    # 创建协程对象
    sp1 = spawn(task1)
    sp2 = spawn(task2)
    sp3 = spawn(task3)
    # sp1.start()
    # sp2.start()
    # sp3.start()
    # sp1.join()
    # sp2.join()
    # sp3.join()
    
    # 使用joinall()方法
    joinall([sp1, sp2, sp3])    # 等同于start和join的作用
    end_time = time.time()
    print(f"执行时间为 {end_time - start_time}")

  执行结果:

start from task1...
start from task2...
start from task3...
end from task1...
end from task2...
end from task3...
执行时间为 5.030768394470215

 

  进程和线程的任务切换是由操作系统自行切换的,自己不能控制

  协程是通过自己的程序(代码)来进行切换的,自己能够控制,只有遇到协程模块能够识别的IO操作的时候,程序才会进行任务切换,实现并发效果,如果所有程序都没有IO操作,那么就基本属于串行执行了

posted @ 2020-11-08 15:58  chchcharlie、  阅读(362)  评论(0编辑  收藏  举报