python-- 进程管道 Pipe、进程 Manager

进程管道 Pipe

管道之间通信是不安全的

from multiprocessing import Pipe

con1,con2 = Pipe()

管道是用于多进程之间通信的一种方式。如果在单进程中使用管道，那么就是con1收数据，就是con2发数据。如果是con1发数据，就是con2收数据如果在多进程中使用管道，那么就必须是父进程使用con1收，子进程就必须使用con2发

父进程使用con1发，子进程就必须使用con2收

父进程使用con2收，子进程就必须使用con1发

父进程使用con2发，子进程就必须使用con1收

在管道中有一个著名的错误叫做EOFError。是指，父进程中如果关闭了发送端，子进程还继续接收数据，那么就会引发EOFError。

from multiprocessing import Pipe, Process


def func(con):
    con1, con2 = con
    con1.close()  # 子进程使用con2和父进程通信，所以
    while 1:
        try:
            print(con2.recv())  # 当主进程的con1发数据时，子进程要死循环的去接收。
        except EOFError:  # 如果主进程的con1发完数据并关闭con1，子进程的con2继续接收时，就会报错，使用try的方式，获取错误
            con2.close()  # 获取到错误，就是指子进程已经把管道中所有数据都接收完了，所以用这种方式去关闭管道
            break


if __name__ == '__main__':
    con1, con2 = Pipe()
    p = Process(target=func, args=((con1, con2),))
    p.start()
    con2.close()  # 在父进程中，使用con1去和子进程通信，所以不需要con2，就提前关闭
    for i in range(10):  # 生产数据
        con1.send(i)  # 给子进程的con2发送数据
    con1.close()  # 生产完数据，关闭父进程这一端的管道

结果：

0
1
2
3
4
5
6
7
8
9

例

from multiprocessing import Process, Pipe


def f(conn):
    conn.send([42, None, 'hello fromchild'])
    conn.send([42, None, 'hello fromchild2'])
    print("from parent:", conn.recv())
    conn.close()


if __name__ == '__main__':
    parent_conn, child_conn = Pipe()  # 需要两个参数接收
    p = Process(target=f, args=(child_conn,))
    p.start()
    print(parent_conn.recv())
    print(parent_conn.recv())
    parent_conn.send("范冰冰")

结果：

[42, None, 'hello fromchild']
[42, None, 'hello fromchild2']
from parent: 范冰冰

parent_conn, child_conn = Pipe()生成管道实例，相当于socket通信，一头在主进程，一头在子进程，就可以实现进程之间的数据的传递

进程 Manager

Queue，Pipe只能实现进程之间数据的传递，Manager可以进行数据之间的共享

from multiprocessing import Manager, Value

m = Manager()
num = m.dict({键: 值})
num = m.list([1, 2, 3])

例

from multiprocessing import Process, Manager


def func(num):
    num[0] -= 1  # num[0] = 1
    print('子进程中的num的值是', num)


if __name__ == '__main__':
    m = Manager()
    num = m.list([1, 2, 3])
    p = Process(target=func, args=(num,))
    p.start()
    p.join()
    print('父进程中的num的值是', num)

结果：

子进程中的num的值是 [0, 2, 3]
父进程中的num的值是 [0, 2, 3]