Apache Spark集群模式选择
2017-05-30 00:00
232 查看
Standalone
Standalone是最容易搭建的模式，在只运行Spark的情况下，Standalone提供了跟其他两种模式差不多的特性。所以如果在只运行Spark，并且Spark集群节点小于100的情况下，可以选择Standalone模式。Apache Mesos
如果已经使用Docker容器，或者有些其他项目需要运行在集群上，可选择Apache Mesos模式。Hadoop YARN
如果项目中已经有使用Hadoop，可使用Hadoop YARN模式。详细对比参考资料：
which-cluster-type-should-i-choose-for-spark
with-how-many-spark-nodes-should-i-use-mesos-or-yarn
How does YARN compare to Mesos
内容来自用户分享和网络整理，不保证内容的准确性，如有侵权内容，可联系管理员处理 
相关文章推荐
- Apache Spark 2.2.0 中文文档 - 集群模式概述 | ApacheCN
- Apache Spark - Cluster Mode Overview (Spark集群模式一览)
- Apache Spark 2.2.0 中文文档 - 集群模式概述 | ApacheCN
- Windows下的PHP开发环境搭建——PHP线程安全与非线程安全、Apache版本选择，及详解五种运行模式。
- Spark官方文档——独立集群模式（Standalone Mode）
- Spark教程-构建Spark集群-配置Hadoop单机模式并运行Wordcount（1）
- spark 集群模式读写mysql 问题的处理
- Spark2.1.0 + CarbonData1.0.0+hadoop2.7.2集群模式部署及使用入门
- Apache Spark-1.0.1集群搭建
- spark之12：集群模式概述
- Maven安装编译Spark，搭建Spark独立集群模式（Hadoop架构之上）
- Spark Streaming揭秘 Day31 集群模式下SparkStreaming日志分析（续）
- 【Spark学习】Apache Spark集群硬件配置要求
- Spark2.1.0 + CarbonData1.0.0集群模式部署及使用入门
- Apache Spark源码走读之15 -- Standalone部署模式下的容错性分析
- apache+tomcat集群中jk模式下监控worker的配置
- Spark 概念学习系列之如果Apache Spark集群中没有分布式系统，则会？（六）
- 【Spark亚太研究院系列丛书】Spark实战高手之路-第一章 构建Spark集群-配置Hadoop伪分布模式并运行Wordcount示例（1）
- Apache Spark源码走读之15 -- Standalone部署模式下的容错性分析