Hadoop之Storm安装
2015-08-19 07:32
253 查看
nimbus:主节点,负责分发代码,分配任务(只能有一个)
supervisor:从节点,负责执行任务(可以有多个)
jdk
zookeeper(192.168.1.170/171/172)
建议在zookeeper的节点上设置一个crontab定时任务,同步时间:* * * * * /usr/sbin/ntpdate time.nist.gov
主节点:192.168.1.170 nimbus
从节点:192.168.1.171,172 supervisor
storm版本是0.9.3
安装
1. 解压:tar –zxvf
2. conf/storm.yaml
编辑:
1.srorm.zookeeper.servers:
-“192.168.0.1” (注意,-前是空格,不能是制表符,tab。-后也有空格 适用于多个参数)
- “ 192.168.0.2”
2. nimbus.host:(空格)”192.168.0.3”主节点(注意格式,单个参数)
3. storm.local.dir:”/usr/local/storm/tmp”存储提交的源码 (注意文件路径是否存在,以及权限,否则导致启动后 一会就exit )
4. supervisor.slots.ports:(格式同上)
-6700
-6701
-6702
-6703
5. 主节点与从节点配置文件一样。 将上述配置好的storm 直接copy其他节点。
6.启动 +后台启动
nohup storm /bin/storm nimbus >/dev/null 2>&1 & 主节点
(如果没有nohup ,关掉窗口后进程也关闭) & 后台 (记得要复习shell)
jps 会看到 conf_value 进程
nohup storm /bin/storm supervisor >/dev/null 2>&1 & 所有从节点
7.启动web界面
nohup storm /bin/storm ui>/dev/null 2>&1 & 主节点
进程名称 core
访问 :192.168.0.3:8080
8.启动后台log
nohup storm logviewer >/dev/null 2>&1 & 所有从节点
9.提交代码
storm java path/*.jar xxxxMainclasee(全路径)
supervisor:从节点,负责执行任务(可以有多个)
jdk
zookeeper(192.168.1.170/171/172)
建议在zookeeper的节点上设置一个crontab定时任务,同步时间:* * * * * /usr/sbin/ntpdate time.nist.gov
主节点:192.168.1.170 nimbus
从节点:192.168.1.171,172 supervisor
storm版本是0.9.3
安装
1. 解压:tar –zxvf
2. conf/storm.yaml
编辑:
1.srorm.zookeeper.servers:
-“192.168.0.1” (注意,-前是空格,不能是制表符,tab。-后也有空格 适用于多个参数)
- “ 192.168.0.2”
2. nimbus.host:(空格)”192.168.0.3”主节点(注意格式,单个参数)
3. storm.local.dir:”/usr/local/storm/tmp”存储提交的源码 (注意文件路径是否存在,以及权限,否则导致启动后 一会就exit )
4. supervisor.slots.ports:(格式同上)
-6700
-6701
-6702
-6703
5. 主节点与从节点配置文件一样。 将上述配置好的storm 直接copy其他节点。
6.启动 +后台启动
nohup storm /bin/storm nimbus >/dev/null 2>&1 & 主节点
(如果没有nohup ,关掉窗口后进程也关闭) & 后台 (记得要复习shell)
jps 会看到 conf_value 进程
nohup storm /bin/storm supervisor >/dev/null 2>&1 & 所有从节点
7.启动web界面
nohup storm /bin/storm ui>/dev/null 2>&1 & 主节点
进程名称 core
访问 :192.168.0.3:8080
8.启动后台log
nohup storm logviewer >/dev/null 2>&1 & 所有从节点
9.提交代码
storm java path/*.jar xxxxMainclasee(全路径)
相关文章推荐
- Steam上支持Linux的游戏数量突破1400
- Hystrix 使用与分析 - zhangyijun - ITeye技术网站
- 关于压缩软件gzip和xz的简单对比
- 怎样布局网站关键词最合理
- Linux下常用的C/C++开源Socket库
- Linux常用命令(一)-管理文件和目录命令(3)-cd命令
- linux下的挂载点和分区是什么关系
- Linux第二天
- OpenGL绘制简单的参数曲线(一)——三次Hermite曲线
- Linux中使用京东代码库JDCode创建私有Git仓库
- linux gpio 控制 基于 sysfs
- tomcat中三种部署项目的方法
- CentOS6.5上golang环境配置
- log4j.properties配置信息
- OpenLDAP自定义属性的启用
- AM335x(TQ335x)学习笔记——Linux CAN测试程序的编译
- Ubuntu安装Docker
- Linux 线程操作函数总结
- Linux 线程属性函数总结
- Linux 线程同步的三种方法