单机搭建spark环境
2016-06-01 09:41
183 查看
spark的环境搭建比较容易,但是为了巩固记忆,我还是把她写下来;
首先,要下载资源,Apache官网可以下载;
%我是在我的Mac上装的,据说windows装起来很费劲%
2,将spark文件包,放到自己的指定工作目录;
3,将终端change到工作目录,
键入 command:./sbin/start-master.sh
4,浏览器 输入:localhost:8080
5,创建工作节点,命令为:
./bin/spark-class org.apache.spark.deploy.worker.Worker spark://......
spark 后加的内容为localhost界面的URL;注意REST URL不等于URL
以上工作节点创建完成,刷新localhost界面可以发现 WorkerID;
_________________________________________________________________________________________________________________________
首先,要下载资源,Apache官网可以下载;
%我是在我的Mac上装的,据说windows装起来很费劲%
2,将spark文件包,放到自己的指定工作目录;
3,将终端change到工作目录,
键入 command:./sbin/start-master.sh
4,浏览器 输入:localhost:8080
5,创建工作节点,命令为:
./bin/spark-class org.apache.spark.deploy.worker.Worker spark://......
spark 后加的内容为localhost界面的URL;注意REST URL不等于URL
以上工作节点创建完成,刷新localhost界面可以发现 WorkerID;
_________________________________________________________________________________________________________________________
相关文章推荐
- 【自定义View系列】View的事件分发机制
- ImageLoader配置
- php 字符串处理
- 从豆瓣到CSDN
- 优秀jQuery插件整理!
- android studio build gradle版本不兼容导致not found runProguard
- 【iOS】Xib的使用与File'Owner总结
- 【自定义View系列】android的UI结构
- 查看MDB文件
- this.Invoke和this.BeginInvoke的区别
- 数据库的基本操作
- 侧滑的布局SlidingPaneLayout和DrawerLayout
- 第二个冲刺 6.3 6.8
- Autolayout -- 视图等宽 && 间距等宽
- 【自定义View系列】View的draw过程
- 信息检索与数据挖掘的常用加权技术。
- mysql更新时的safe_mode
- StartUML破解
- 基于DDD的.NET开发框架 - ABP领域服务
- STL next_permutation and prev_permutation