Python通过4种方式实现进程数据通信
2020-03-13 12:08
435 查看
python提供了4种方式来满足进程间的数据通信
1. 使用multiprocessing.Queue可以在进程间通信,但不能在Pool池创建的进程间进行通信
2. 使用multiprocessing.Manager.Queue可以在Pool进程池创建的进程间进行通信
3. 通过Pipe进行线程间的通信, pipe进程间通信的性能高于Queue,但是它只能在两个进程间进行通信
4. 使用Manager类提供的数据结构可以进行进程间的通信
from multiprocessing import Process, Queue, Pool, Manager, Pipe # 注意线程间的通信,使用的queue.Queue # from queue import Queue import time # 1. 使用multiprocessing.Queue可以在进程间通信 # def producer(queue): # queue.put('A') # time.sleep(2) # # def consumer(queue): # time.sleep(2) # data = queue.get() # print(data) # # if __name__ == '__main__': # queue= Queue(10) # p = Process(target=producer, args=(queue,)) # c = Process(target=consumer, args=(queue,)) # p.start() # c.start() # p.join() # c.join() # 2. 使用共享全局变量,在多进程间通信(结论: 不行) # def producer(a): # a += 1 # time.sleep(2) # # # def consumer(a): # time.sleep(2) # print(a) # # if __name__ == '__main__': # a = 1 # p = Process(target=producer, args=(a,)) # c = Process(target=consumer, args=(a,)) # p.start() # c.start() # p.join() # c.join() # 3. multiprocessing.Queue不能用于multiprocessing.Pool进程池创建的进程间进行通信 # def producer(queue): # queue.put('A') # time.sleep(2) # # # def consumer(queue): # time.sleep(2) # data = queue.get() # print("consumer:%s" % data) # # # if __name__ == '__main__': # # queue = Queue(10) # 这个是使用multiprocessing.Queue,无效 # queue = Manager().Queue(10) # 这个是使用multiprocessing.Manager.Queue, 可以 # pool = Pool(2) # pool.apply_async(producer, args=(queue,)) # pool.apply_async(consumer, args=(queue,)) # pool.close() # pool.join() # 4.通过Pipe进行线程间的通信, pipe进程间通信的性能高于Queue # def producer(pipe): # pipe.send('admin') # # # def consumer(pipe): # data = pipe.recv() # print("consumer:%s" % data) # # # if __name__ == '__main__': # receive_pipe, send_pipe = Pipe() # """Pipe只能适应于两个进程间的通信""" # p = Process(target=producer, args=(send_pipe,)) # c = Process(target=consumer, args=(receive_pipe,)) # p.start() # c.start() # p.join() # c.join() # 5. 进程间通信的其它方式 def add_data(p_dict, key, value): p_dict[key] = value if __name__ == '__main__': progress_dict = Manager().dict() #Manager()类中提供的数据结构都能够做到进程的通信 first_progress = Process(target=add_data, args=(progress_dict, 'name', 'admin',)) second_progress = Process(target=add_data, args=(progress_dict, 'age', 45,)) first_progress.start() second_progress.start() first_progress.join() second_progress.join() print(progress_dict) #{'age': 45, 'name': 'admin'}
以上就是本文的全部内容,希望对大家的学习有所帮助
您可能感兴趣的文章:
相关文章推荐
- 转发:Python通过Manager方式实现多个无关联进程共享数据
- Python通过Manager方式实现多个无关联进程共享数据
- Python 进程线程之间通信方式(2.1,共享数据实现进程之间通信)
- Python 进程线程之间通信方式(2,共享数据实现进程之间通信)
- Python通过Manager方式实现多个无关联进程共享数据的实现
- 11.python并发入门(part10 多进程之间实现通信,以及进程之间的数据共享)
- python实现多进程与多线程HTTP服务器,浏览器通过HTTP与之通信3
- Python多任务(五)-----4种进程间的通信(数据交换)Queue对象、管道Pipe、共享内存Value和Array、Manager对象 详解
- python实现协程方式的HTTP服务器,浏览器通过HTTP与之通信4
- 通过自定义区段实现进程间的数据共享
- 进程间数据通信方式和特点 [转]
- Visual C++进程间数据通信的实现
- 稳扎稳打Silverlight(58) - 4.0通信之WCF RIA Services: 通过 Domain Service, 以 MVVM 模式实现数据的添加、删除、修改和查询
- Python 最近因开发项目的需要,有一个需求,就是很多SNS网站都有的通过 Email地址 导入好友列表,不过这次要导入的不是Email 列表,而是QQ的好友列表。 实现方式: 通过goog
- 最新隐藏进程 RING3实现方式:hook ZwQuerySystemInformation 隐藏进程 在XP里测试通过
- 稳扎稳打Silverlight(57) - 4.0通信之WCF RIA Services: 概述, 通过 DomainDataSource 实现数据的添加、查询、更新和删除操作
- 稳扎稳打Silverlight(57) - 4.0通信之WCF RIA Services: 概述, 通过 DomainDataSource 实现数据的添加、查询、更新和删除操作
- 稳扎稳打Silverlight(58) - 4.0通信之WCF RIA Services: 通过 Domain Service, 以 MVVM 模式实现数据的添加、删除、修改和查询
- 通过Python脚本理解系统进程间通信 推荐
- 采用用同步编程的方式实现跨进程异步获取数据