actor-based programming与构建大规模扩展性的并行系统
2013-03-28 12:59
155 查看
1.actor-based programming
actor based 类似于object based ,但是它比object 多了自己的message queue 和message processor、message handler
也就是说一个actor是一个独立的处理单元,但是他不是真正的物理上的thread
可以看成是轻量级的thread。
一个actor可以给另一个actor push msg
这样系统中就可以存在大量的独立活动单元,是并行系统的基本组件。
2.Intel TBB(Threading Build Block)
这是intel的一个开源的高性能线程库,它可以很大效率的支持多个任务的并行(这是隐藏实际的物理的thread的),我们可以把上面的actor分配给TBB去调度管理,来实现高性能的并行系统。
这个库还提供了各种thread-safe的container,而我们知道标准c++的stl的container都是线程不安全的。
感想
这种actor-based方法让我想到了QT中的Qwidget,他们可以互相通信,有各自的message queue,但是不同的是Qwidget是单线程的,没有一个多线程库去对他们之间做并发。
使用actor-based方法构建并行系统,比我们单纯使用多线程来实现的好处是:
1.纯多线程的系统受线程数量的影响,当系统复杂度提高时,线程数目要升高,会降低性能甚至不能扩展系统。
2.纯多线程的系统一般要使用lock critical area等来对线程进行互斥,当系统复杂度提升时,各种dead lock等问题也会出来,降低性能。而actor-based是share nothing的,一个actor里面的数据是相互独立的,不必使用线程间的互斥和等待。
但是个人认为这种情况是理想的,有时还是要用锁的,关于这个,现在有一种transactional memory的东西来实现无锁的多线程并发,不过还处于实验阶段。
actor based 类似于object based ,但是它比object 多了自己的message queue 和message processor、message handler
也就是说一个actor是一个独立的处理单元,但是他不是真正的物理上的thread
可以看成是轻量级的thread。
一个actor可以给另一个actor push msg
这样系统中就可以存在大量的独立活动单元,是并行系统的基本组件。
2.Intel TBB(Threading Build Block)
这是intel的一个开源的高性能线程库,它可以很大效率的支持多个任务的并行(这是隐藏实际的物理的thread的),我们可以把上面的actor分配给TBB去调度管理,来实现高性能的并行系统。
这个库还提供了各种thread-safe的container,而我们知道标准c++的stl的container都是线程不安全的。
感想
这种actor-based方法让我想到了QT中的Qwidget,他们可以互相通信,有各自的message queue,但是不同的是Qwidget是单线程的,没有一个多线程库去对他们之间做并发。
使用actor-based方法构建并行系统,比我们单纯使用多线程来实现的好处是:
1.纯多线程的系统受线程数量的影响,当系统复杂度提高时,线程数目要升高,会降低性能甚至不能扩展系统。
2.纯多线程的系统一般要使用lock critical area等来对线程进行互斥,当系统复杂度提升时,各种dead lock等问题也会出来,降低性能。而actor-based是share nothing的,一个actor里面的数据是相互独立的,不必使用线程间的互斥和等待。
但是个人认为这种情况是理想的,有时还是要用锁的,关于这个,现在有一种transactional memory的东西来实现无锁的多线程并发,不过还处于实验阶段。
相关文章推荐
- 【ZZ】GPU上并行处理大规模粒子系统
- 基于ZooKeeper构建大规模配置系统II
- 如何使用Spark大规模并行构建索引
- 面向对象设计原则之三(里氏替换原则)-构建扩展性更好的系统
- 基于ZooKeeper构建大规模配置系统
- GPU上并行处理大规模粒子系统(转-补译)
- 可扩展性构建灵活系统的思考
- 基于ZooKeeper构建大规模配置系统
- 基于ZooKeeper构建大规模配置系统II
- 可扩展性(Extensibility): 构建灵活系统的思考
- Activemq构建高并发、高可用的大规模消息系统
- 【Scala-ML】如何利用Scala构建并行机器学习系统
- Office 365 利用并行工作流构建威客式任务管理系统之测试威客系统!
- 【转】基于Trident构建大规模实时流数据处理系统
- 如何构建高可扩展性和灵活性的企业级信息管理系统(转)
- GPU上并行处理大规模粒子系统
- 基于ZooKeeper构建大规模配置系统
- 如何使用Spark大规模并行构建索引
- 【Scala-ML】怎样利用Scala构建并行机器学习系统
- 可扩展性(Extensibility): 构建灵活系统的思考