python 多进程共享全局变量之Manager()

Manager支持的类型有list,dict,Namespace,Lock,RLock,Semaphore,BoundedSemaphore,Condition,Event,Queue,Value和Array。

但当使用Manager处理list、dict等可变数据类型时,需要注意一个陷阱,即Manager对象无法监测到它引用的可变对象值的修改,需要通过触发__setitem__方法来让它获得通知。

而触发__setitem__方法比较直接的办法就是增加一个中间变量,如同在C语言中交换两个变量的值一样:int a=1;int b=2;int tmp=a;a=b;b=tmp;

python例子:

 1 from multiprocessing import Manager,Process
 2 
 3 def test_manager(m):
 4 
 5   m[0]['id'] = 2
 6 
 7 m = Manager().list()
 8 
 9 m.append({"id":1})
10 
11 p = Process(target=test_manager,args=(m,))
12 
13 p.start()
14 
15 p.join()
16 
17 print m[0]

执行结果:

{"id":1}

并未改变

修改test_manager()

def test_manager(m):
    tmp = m[0]
    tmp{"id"} = 2
    m[0] = tmp

此时执行结果即为:

{"id":2}

另外,对于Process需注意对象要可被序列化pickle

 

posted on 2019-08-15 12:03  fdzwdt  阅读(5607)  评论(0编辑  收藏  举报