您的位置:首页 > 其它

单机搭建spark环境

2016-06-01 09:41 183 查看
spark的环境搭建比较容易,但是为了巩固记忆,我还是把她写下来;

首先,要下载资源,Apache官网可以下载;

%我是在我的Mac上装的,据说windows装起来很费劲%

2,将spark文件包,放到自己的指定工作目录;

3,将终端change到工作目录,

键入 command:./sbin/start-master.sh

4,浏览器 输入:localhost:8080

5,创建工作节点,命令为:

./bin/spark-class org.apache.spark.deploy.worker.Worker spark://......
spark 后加的内容为localhost界面的URL;注意REST URL不等于URL

以上工作节点创建完成,刷新localhost界面可以发现 WorkerID;

_________________________________________________________________________________________________________________________
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: