您的位置:首页 > 其它

Ubuntu 16.04 安装Spark-2.3.0详细步骤

2018-03-19 17:59 573 查看
安装Spark的步骤跟安装Java和Scala的步骤差不多,比较简单,在这里简单表述一下安装流程。
1、下载Spark。
方法一:
这个简单,直接在官网上找到downloads选定红色框框中的版本号就可以了。
注意:package Type大家可以选择Pre-built for Apache Hadoop 2.7 and later,
          也可以选择其他的。Spark的版本安装可以脱离Hadoop直接安装,
          当然你有Hadoop的话,就按照Hadoop的版本来安装。
Spark下载链接:Download Apache Spark



方法二:
首先,本人采用的是清华源下载安装的,因为直接下载限速严重。
清华大学开源软件镜像站链接:清华大学开源软件镜像站



进去后找到Spark,选择你想要的版本号,点击下载就好了。







2、接下来解压压缩包。
解压命令:tar -zxvf spark-2.3.0-bin-hadoop2.7.gz


3、解压后,修改配置文件。
配置文件需要加入以下部分:export SPARK_HOME=/home/tianao/Spark
export PATH=$PATH:$SPARK_HOME/bin:$SPARK_HOME/bin



4、保存文件后,要使环境变量生效:source /etc/profile


5、验证安装成功

内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息