python 进程间数据共享multiProcess.Manger实现解析
2019-09-23 10:12
1491 查看
一、进程之间的数据共享
展望未来,基于消息传递的并发编程是大势所趋
即便是使用线程,推荐做法也是将程序设计为大量独立的线程集合,通过消息队列交换数据。
这样极大地减少了对使用锁定和其他同步手段的需求,还可以扩展到分布式系统中。
但进程间应该尽量避免通信,即便需要通信,也应该选择进程安全的工具来避免加锁带来的问题。
以后我们会尝试使用数据库来解决现在进程之间的数据共享问题。
1.1 Manager模块介绍
虽然进程间数据独立,但可以通过Manager实现数据共享,事实上Manager的功能远不止于此。
A manager object returned by Manager() controls a server process which holds Python objects and allows other processes to manipulate them using proxies.
A manager returned by Manager() will support types list, dict, Namespace, Lock, RLock, Semaphore, BoundedSemaphore, Condition, Event, Barrier, Queue, Value and Array.
1.2 Manager例子
manager这里可以共享列表,字典等很多数据类型
from multiprocessing import Manager,Process,Lock def work(d,lock): lock.acquire() d['count'] -= 1 lock.release() if __name__ == '__main__': lock = Lock() with Manager() as m: dic = m.dict({'count':100})#生成一个字典,可在多个进程间共享和传递 p_l = [] for i in range(100): p = Process(target=work,args=(dic,lock)) p_l.append(p) p.start() for p in p_l: #等待结果 p.join() print(dic)
{'count':0}
以上就是本文的全部内容,希望对大家的学习有所帮助
您可能感兴趣的文章:
相关文章推荐
- Python实现多进程共享数据的方法分析
- Python 进程线程之间通信方式(2,共享数据实现进程之间通信)
- 11.python并发入门(part10 多进程之间实现通信,以及进程之间的数据共享)
- 转发:Python通过Manager方式实现多个无关联进程共享数据
- Python程序中的进程操作-进程间数据共享(multiprocess.Manager)
- Python通过Manager方式实现多个无关联进程共享数据
- Python 进程线程之间通信方式(2.1,共享数据实现进程之间通信)
- python从共享目录读取考勤数据,通过openpyxl解析excel2007,查询出自己考勤记录
- VC共享内存实现进程间数据的交换
- python 多进程数据交互及共享
- WM_COPYDATA实现进程间数据共享
- python 进程间共享数据 (二)
- 共享内存----实现进程间大数据的交换
- Python multiprocessing.Manager介绍和实例(进程间共享数据)
- 共享内存实现进程间大数据的交换
- python 、mmap 实现内存数据共享
- Python 进程之间共享数据(全局变量)
- python 进程 进程池 进程间通信实现解析
- WM_COPYDATA实现进程间数据共享
- linux 共享内存shm_open实现进程间大数据交互