Python 使用multiprocessing 特别耗内存
摘要:
采用multiprocessing多进程进行数据计算的时候内存飚升,这总体可以说是multiprocessing的一个「bug」导致; 大致原因如下: multiprocessing.Process 每启动一个进程都会对当前进程内存进行一次拷贝; 可以采用multiprocessing.Proce 阅读全文
posted @ 2017-10-16 16:01 雪 狼 阅读(6161) 评论(1) 推荐(1) 编辑