Spark1.6.0使用apache-maven-3.3.9编译详细记录

1. apache-maven-3.39安装配置

1-1. 下载解压

maven官方下载地址

http://maven.apache.org/download.cgi

解压到指定目录：（我下载并解压到了E盘根目录）

1-2. 验证JAVA_HOME是否配置

检查JAVA环境变量值:

echo %JAVA_HOME%

ok,这都没有问题。

如果没有，则自行安装配置java环境变量，此处不再赘述，不过配置方法都差不多。

1-3. 配置环境变量

windows7：

计算机-属性-高级系统设置-环境变量



新建系统环境变量：

变量名： MAVEN_HOME
变量值： E:\apache-maven-3.3.9

更新系统PATH变量：

添加（添加;%MAVEN_HOME%\bin;到尾部）到PATH尾部

;%MAVEN_HOME%\bin;

测试maven配置是否成功，命令行输入：mvn -v



就这样！

1-4. 修改maven默认仓库repository

由于准备做Spark开发，所以找到国内maven中央仓库对spark更新比较全的一个。

http://maven.outofmemory.cn/org.apache.spark/

在Maven的安装目录之下，conf文件下面有个settings.xml文件，备份一下这个文件，然后对着下面进行修改。修改的主要目的是添加国内镜像站点进来

2. Spark-1.6.0编译

编译Spark所使用的工具具体版本信息：









加上参数-e重新执行，显示具体错误信息：



又是各种找不到包啊，依赖啊等等，才发现：

引用的maven仓库站点还没有支持Spark1.6.0，最高到Spark1.5.2



所以，此处为了学习编译Spark源码，那就下一套Spark1.5.2的源码来进行编译吧！

1 源码下载解压