spark windows开发调试环境
2017-11-24 17:39
316 查看
spark在windows搭建开发测试环境，需要进行配置
1、JDK
本人用的是jdk1.7.0_15
2、hadoop-2.6.0.tar.gz
下载hadoop-2.6.0.tar.gz，解压，假如解压到D:\hadoop-2.6.0，环境变量添加HADOOP_HOME=D:\hadoop-2.6.0，path添加%HADOOP_HOME%\bin；
3、spark-1.6.0-bin-hadoop2.6.tgz
下载spark-1.6.0-bin-hadoop2.6.tgz，解压，假如解压到D:\spark-1.6.0-bin-hadoop2.6，环境变量添加SPARK_HOME=D:\spark-1.6.0-bin-hadoop2.6，path添加%SPARK_HOME%\bin；
以上的三个需要注意版本匹配，配置完成后重启电脑。
1、JDK
本人用的是jdk1.7.0_15
2、hadoop-2.6.0.tar.gz
下载hadoop-2.6.0.tar.gz，解压，假如解压到D:\hadoop-2.6.0，环境变量添加HADOOP_HOME=D:\hadoop-2.6.0，path添加%HADOOP_HOME%\bin；
3、spark-1.6.0-bin-hadoop2.6.tgz
下载spark-1.6.0-bin-hadoop2.6.tgz，解压，假如解压到D:\spark-1.6.0-bin-hadoop2.6，环境变量添加SPARK_HOME=D:\spark-1.6.0-bin-hadoop2.6，path添加%SPARK_HOME%\bin；
以上的三个需要注意版本匹配，配置完成后重启电脑。
内容来自用户分享和网络整理，不保证内容的准确性，如有侵权内容，可联系管理员处理 
相关文章推荐
- window+idea+spark+debug windows下spark开发调试环境搭建
- window+idea+spark+debug windows下spark开发调试环境搭建
- 搭建Go开发及调试环境（LiteIDE + GoClipse） -- Windows篇
- windows 基于docker下的 spark 开发环境搭建
- windows下eclipseNDK开发兼调试环境配置
- 虚拟机搭建lnmp开发环境供windows开发调试
- Windows 7 搭建 Mobile 6 真机调试开发环境
- spark1.6 windows 开发环境搭建
- Windows下单机安装Spark开发环境
- windows下用eclipse+goclipse插件+gdb搭建go语言开发调试环境
- IDEA 开发环境中 调试Spark SQL及遇到问题解决办法
- windows下用eclipse+goclipse插件+gdb搭建go语言开发调试环境
- Spark2.x学习笔记：6、在Windows平台下搭建Spark开发环境（Intellij IDEA）
- windows eclipse 搭建spark开发环境
- 【Qt】Qt在Windows下的开发与调试环境配置
- 一 eclipse Spark 本地开发调试环境
- windows下用eclipse+goclipse插件+gdb搭建go语言开发调试环境
- Windows下的React-Native开发调试环境安装
- Windows下单机安装Spark开发环境
- windows下spark开发环境配置