Containers Reserved yarn resourcemanager
2016-01-15 17:42
357 查看
yarn rm的管理页面中显示了集群的概况，其中有一个指标叫Containers Reserved .
预留的容器，为什么会预留，集群的资源使用饱合，新的app请求的资源一般会进入pending状态，为什么需要预留，
查阅资料说是，如果app申请的资源不太容易分配，比如新的app是一个计算密集型的，一个task需要6个vcores，其他任务需要一个，
则刚释放的资源如果不预留，就会被其他任务使用，而这样有失公平。
这也是yarn 公平调度器的一个特性，有关公平调度器的更多说明，请阅读：
Fair scheduler
有关yarn资源管理的最佳实践，我还阅读了另外一篇文章，不错，推荐在此：
预留的容器，为什么会预留，集群的资源使用饱合，新的app请求的资源一般会进入pending状态，为什么需要预留，
查阅资料说是，如果app申请的资源不太容易分配，比如新的app是一个计算密集型的，一个task需要6个vcores，其他任务需要一个，
则刚释放的资源如果不预留，就会被其他任务使用，而这样有失公平。
这也是yarn 公平调度器的一个特性，有关公平调度器的更多说明，请阅读：
Fair scheduler
有关yarn资源管理的最佳实践，我还阅读了另外一篇文章，不错，推荐在此：
Best Practices for YARN Resource Management
内容来自用户分享和网络整理，不保证内容的准确性，如有侵权内容，可联系管理员处理 
相关文章推荐
- 严重: Failed to initialize end point associated with ProtocolHandler ["http-bio-8080"]
- http://blog.csdn.net/enuola/article/details/7917221
- .net4.0切换2.0时，SplitContainer”的对象强制转换为类型
- Rails 4中document.ready失效
- Paint获取Text的宽和高的数据
- Spark学习之键值对（pair RDD）操作（3）
- Spark学习之键值对（pair RDD）操作（3）
- 使用Genymotion调试出现错误INSTALL_FAILED_CPU_ABI_INCOMPATI
- 全本一六年一月再论人工智能
- ALLOCATE语句分配FORTRAN动态数组方法(转自http://blog.csdn.net/zhuxianjianqi/article/details/8067174)
- vim molokai配色方案（调过）
- grails学习笔记
- hybris trail goal
- clang: error: linker command failed with exit code 1 (use -v to see invocation)
- foxmail设置gmail 不翻墙，切换账户！！！thunderbird
- MT6755 使用R63350 IC 出现唤醒概率性闪白，并导致ESD FAIL
- CES2016：IBM使用Watson AI展示了健康应用和机器人
- [DGMGRL]ORA错误解决(ORA-16829: fast-start failover configuration is lagging)
- 行为树-学习笔记（5）-AI寻找玩家目标并攻击的实现
- 放弃iPad Pro并换回iPad Air 2 你是这样吗？