Python多进程同步Lock、Semaphore、Event实例
2014-11-21 00:00
976 查看
同步的方法基本与多线程相同。
1) Lock
当多个进程需要访问共享资源的时候,Lock可以用来避免访问的冲突。
在上面的例子中,如果两个进程没有使用lock来同步,则他们对同一个文件的写操作可能会出现混乱。
2)Semaphore
Semaphore用来控制对共享资源的访问数量,例如池的最大连接数。
上面的实例中使用semaphore限制了最多有2个进程同时执行。
3)Event
Event用来实现进程间同步通信。
1) Lock
当多个进程需要访问共享资源的时候,Lock可以用来避免访问的冲突。
import multiprocessing import sys def worker_with(lock, f): with lock: fs = open(f,"a+") fs.write('Lock acquired via with\n') fs.close() def worker_no_with(lock, f): lock.acquire() try: fs = open(f,"a+") fs.write('Lock acquired directly\n') fs.close() finally: lock.release() if __name__ == "__main__": f = "file.txt" lock = multiprocessing.Lock() w = multiprocessing.Process(target=worker_with, args=(lock, f)) nw = multiprocessing.Process(target=worker_no_with, args=(lock, f)) w.start() nw.start() w.join() nw.join()
在上面的例子中,如果两个进程没有使用lock来同步,则他们对同一个文件的写操作可能会出现混乱。
2)Semaphore
Semaphore用来控制对共享资源的访问数量,例如池的最大连接数。
import multiprocessing import time def worker(s,i): s.acquire() print(multiprocessing.current_process().name + " acquire") time.sleep(i) print(multiprocessing.current_process().name + " release") s.release() if __name__ == "__main__": s = multiprocessing.Semaphore(2) for i in range(5): p = multiprocessing.Process(target=worker, args=(s,i*2)) p.start()
上面的实例中使用semaphore限制了最多有2个进程同时执行。
3)Event
Event用来实现进程间同步通信。
import multiprocessing import time def wait_for_event(e): """Wait for the event to be set before doing anything""" print ('wait_for_event: starting') e.wait() print ('wait_for_event: e.is_set()->' + str(e.is_set())) def wait_for_event_timeout(e, t): """Wait t seconds and then timeout""" print ('wait_for_event_timeout: starting') e.wait(t) print ('wait_for_event_timeout: e.is_set()->' + str(e.is_set())) if __name__ == '__main__': e = multiprocessing.Event() w1 = multiprocessing.Process(name='block', target=wait_for_event, args=(e,)) w1.start() w2 = multiprocessing.Process(name='non-block', target=wait_for_event_timeout, args=(e, 2)) w2.start() time.sleep(3) e.set() print ('main: event is set') #the output is: #wait_for_event_timeout: starting #wait_for_event: starting #wait_for_event_timeout: e.is_set()->False #main: event is set #wait_for_event: e.is_set()->True
相关文章推荐
- Python多进程同步Lock、Semaphore、Event实例
- Python多线程同步Lock、RLock、Semaphore、Event实例
- Python多线程同步Lock、RLock、Semaphore、Event实例
- python类库32[多进程同步Lock+Semaphore+Event]
- Python多进程同步简单实现代码
- python之多进程和多线程以及同步异步阻塞
- Python多进程编程-进程间协作(Queue、Lock、Semaphore、Event、Pipe)
- Python学习之协程使用同步锁lock方法详解
- Python 中的多线程,多进程,并发,并行,同步,通信
- python类库32[多进程同步Lock+Semaphore+Event]
- python 多线程中的同步锁 Lock Rlock Semaphore Event Condition
- c#线程同步中的lock,monitor,同步事件和等待句柄以及mutex的介绍
- python写的目录同步小程序收藏
- 使用lock同步线程,建立了10个线程实例
- C# 线程,同步与锁————Lock你到底锁住了谁 - 转
- c# 线程同步: 详解lock,monitor,同步事件和等待句柄以及mutex
- c# 线程同步: 详解lock,monitor,同步事件和等待句柄以及mutex
- c# 线程同步: 详解lock,monitor,同步事件和等待句柄以及mutex
- python中的多进程处理
- Python多线程学习(二、线程的同步)