Day 39 管道 、数据共享与地址池
参考张磊同学的博客
http://www.cnblogs.com/chongdongxiaoyu/p/8658379.html
一、管道
#创建管道的类: Pipe([duplex]):在进程之间创建一条管道,并返回元组(conn1,conn2),其中conn1,conn2表示管道两端的连接对象,强调一点:必须在产生Process对象之前产生管道 #参数介绍: dumplex:默认管道是全双工的,如果将duplex射成False,conn1只能用于接收,conn2只能用于发送。 #主要方法: conn1.recv():接收conn2.send(obj)发送的对象。如果没有消息可接收,recv方法会一直阻塞。如果连接的另外一端已经关闭,那么recv方法会抛出EOFError。 conn1.send(obj):通过连接发送对象。obj是与序列化兼容的任意对象 #其他方法: conn1.close():关闭连接。如果conn1被垃圾回收,将自动调用此方法 conn1.fileno():返回连接使用的整数文件描述符 conn1.poll([timeout]):如果连接上的数据可用,返回True。timeout指定等待的最长时限。如果省略此参数,方法将立即返回结果。如果将timeout射成None,操作将无限期地等待数据到达。 conn1.recv_bytes([maxlength]):接收c.send_bytes()方法发送的一条完整的字节消息。maxlength指定要接收的最大字节数。如果进入的消息,超过了这个最大值,将引发IOError异常,并且在连接上无法进行进一步读取。如果连接的另外一端已经关闭,再也不存在任何数据,将引发EOFError异常。 conn.send_bytes(buffer [, offset [, size]]):通过连接发送字节数据缓冲区,buffer是支持缓冲区接口的任意对象,offset是缓冲区中的字节偏移量,而size是要发送字节数。结果数据以单条消息的形式发出,然后调用c.recv_bytes()函数进行接收 conn1.recv_bytes_into(buffer [, offset]):接收一条完整的字节消息,并把它保存在buffer对象中,该对象支持可写入的缓冲区接口(即bytearray对象或类似的对象)。offset指定缓冲区中放置消息处的字节位移。返回值是收到的字节数。如果消息长度大于可用的缓冲区空间,将引发BufferTooShort异常。
from multiprocessing import Process, Pipe#引入进程模块和管道模块 def f(conn):#定义一个函数 conn.send("Hello The_Third_Wave")#发送一条信息 conn.close()#关闭这个进程 if __name__ == '__main__':#如果名字等于当前名称 parent_conn, child_conn = Pipe()#接收两个参数 p = Process(target=f, args=(child_conn,))#创建一个进程 p.start()#启动进程 print(parent_conn.recv())#接收一个信息 p.join()#等待进程结束
管道实现消费者生成者模型
# from multiprocessing import Lock,Pipe,Process # def producer(con,pro,name,food): # con.close() # for i in range(100): # f = '%s生产%s%s'%(name,food,i) # print(f) # pro.send(f) # pro.send(None) # pro.send(None) # pro.send(None) # pro.close() # # def consumer(con,pro,name,lock): # pro.close() # while True: # lock.acquire() # food = con.recv() # lock.release() # if food is None: # con.close() # break # print('%s吃了%s' % (name, food)) # if __name__ == '__main__': # con,pro = Pipe() # lock= Lock() # p = Process(target=producer,args=(con,pro,'egon','泔水')) # c1 = Process(target=consumer, args=(con, pro, 'alex',lock)) # c2 = Process(target=consumer, args=(con, pro, 'bossjin',lock)) # c3 = Process(target=consumer, args=(con, pro, 'wusir',lock)) # c1.start() # c2.start() # c3.start() # p.start() # con.close() # pro.close() # from multiprocessing import Process,Pipe,Lock # # def consumer(produce, consume,name,lock): # produce.close() # while True: # lock.acquire() # baozi=consume.recv() # lock.release() # if baozi: # print('%s 收到包子:%s' %(name,baozi)) # else: # consume.close() # break # # def producer(produce, consume,n): # consume.close() # for i in range(n): # produce.send(i) # produce.send(None) # produce.send(None) # produce.close() # # if __name__ == '__main__': # produce,consume=Pipe() # lock = Lock() # c1=Process(target=consumer,args=(produce,consume,'c1',lock)) # c2=Process(target=consumer,args=(produce,consume,'c2',lock)) # p1=Process(target=producer,args=(produce,consume,30)) # c1.start() # c2.start() # p1.start() # produce.close() # consume.close() # pipe 数据不安全性 # IPC # 加锁来控制操作管道的行为 来避免进程之间争抢数据造成的数据不安全现象 # 队列 进程之间数据安全的 # 管道 + 锁