CenterOs下kafka、zookeeper、storm集群环境变量配置及启动命令总结
2018-02-23 00:08
281 查看
花了两天时间看了kafka、zookeeper、storm的环境搭建,搭建完成之后对其启动命令进行总结,以我的配置为例,环境组件全部配在了/usr/local目录下
以下为环境变量的配置:
JAVA_HOME=/usr/local/jdk
JRE_HOME=$JAVA_HOME/jre/
CLASSPATH=.:$JAVA_HOME/lib:$JAVA_HOME/lib/tools.jar
PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$PATH
export ZOOKEEPER_HOME=/usr/local/zookeeper
export PATH=$PATH:$ZOOKEEPER_HOME/bin
export STORM_HOME=/usr/local/storm
export PATH=$STORM_HOME/bin:$PATH
1、kafka
需要做的配置文件更改 server.properties:
broker.id=0
log.dirs=/usr/local/kafka/kafka-logs
zookeeper.connect=192.168.136.128:2181,192.168.136.129:2181,192.168.136.130:2181
zookeeper.properties:
dataDir=/usr/local/zookeeper/data
启动命令(注意:在bin目录下):
./kafka-server-start.sh ../config/server.properties
2.storm:
修改storm.yaml文件:
storm.zookeeper.servers:#zookeeper的各个主机ip
- "192.168.136.128"
- "192.168.136.129"
- "192.168.136.130"
nimbus.host: "192.168.136.128"#主节点的ip
storm.local.dir: "/usr/local/storm/status"#服务器状态的存储目录
supervisor.slots.ports:#工作节点的端口
- 6700
- 6701
- 6702
- 6703
启动命令:1)主节点:1.storm ui >/dev/null 2>&1 & 2.
storm nimbus >/dev/null 2>&1 &
2)从节点:storm supervisor >/dev/null 2>&1 &
测试命令:jps 显示nimbus为主节点启动 supervisor为从节点启动
3. zookeeper
配置zoo.cfg
将默认自带的zoo_sample.cfg改名为zoo.cfg
第一步:更改:dataDir=/usr/local/zookeeper/data
server.0=192.168.136.128:2888:3888
server.1=192.168.136.129:2888:3888
server.2=192.168.136.130:2888:3888
3个端口的作用2181:对cline端提供服务3888:选举leader使用2888:集群内机器通讯使用(Leader监听此端口)这里只修改ip即可
第二步:
在zookeeper根目录下创建data目录,利用vim生成一个myid文件,根据主机号赋值0,1,2
第一台主机就为0,第二台就为1,一次继续
启动命令:zkServer.sh start(启动) zkServer.sh stop(停止) zkServer.sh status(查看服务状态)
以下为环境变量的配置:
JAVA_HOME=/usr/local/jdk
JRE_HOME=$JAVA_HOME/jre/
CLASSPATH=.:$JAVA_HOME/lib:$JAVA_HOME/lib/tools.jar
PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$PATH
export ZOOKEEPER_HOME=/usr/local/zookeeper
export PATH=$PATH:$ZOOKEEPER_HOME/bin
export STORM_HOME=/usr/local/storm
export PATH=$STORM_HOME/bin:$PATH
1、kafka
需要做的配置文件更改 server.properties:
broker.id=0
log.dirs=/usr/local/kafka/kafka-logs
zookeeper.connect=192.168.136.128:2181,192.168.136.129:2181,192.168.136.130:2181
zookeeper.properties:
dataDir=/usr/local/zookeeper/data
启动命令(注意:在bin目录下):
./kafka-server-start.sh ../config/server.properties
2.storm:
修改storm.yaml文件:
storm.zookeeper.servers:#zookeeper的各个主机ip
- "192.168.136.128"
- "192.168.136.129"
- "192.168.136.130"
nimbus.host: "192.168.136.128"#主节点的ip
storm.local.dir: "/usr/local/storm/status"#服务器状态的存储目录
supervisor.slots.ports:#工作节点的端口
- 6700
- 6701
- 6702
- 6703
启动命令:1)主节点:1.storm ui >/dev/null 2>&1 & 2.
storm nimbus >/dev/null 2>&1 &
2)从节点:storm supervisor >/dev/null 2>&1 &
测试命令:jps 显示nimbus为主节点启动 supervisor为从节点启动
3. zookeeper
配置zoo.cfg
将默认自带的zoo_sample.cfg改名为zoo.cfg
第一步:更改:dataDir=/usr/local/zookeeper/data
server.0=192.168.136.128:2888:3888
server.1=192.168.136.129:2888:3888
server.2=192.168.136.130:2888:3888
3个端口的作用2181:对cline端提供服务3888:选举leader使用2888:集群内机器通讯使用(Leader监听此端口)这里只修改ip即可
第二步:
在zookeeper根目录下创建data目录,利用vim生成一个myid文件,根据主机号赋值0,1,2
第一台主机就为0,第二台就为1,一次继续
启动命令:zkServer.sh start(启动) zkServer.sh stop(停止) zkServer.sh status(查看服务状态)
相关文章推荐
- kafka+zookeeper集群安装与配置(CENTOS7环境)及开发中遇到的问题解决
- Windows 环境下 Zookeeper 单机 下载、配置、启动和简单命令
- Tomcat启动时一闪而过,但是jdk环境变量配置正确,并使用java或者javac命令多可以运行,但是tomcat不能运行解决办法。
- 日常总结(十一)maven配置环境变量提示:mvn不是内部或外部命令,也不是可运行的程序或批处理文件
- FIS--关于下载php后的配置(启动fis的调试服务器(注意添加 --no-rewrite 参数),如果报错 没有php-cgi环境,请 安装 它,并把php-cgi命令加到系统的环境变量)
- Java---一周总结 4.10 迂回转折之windows 7 java环境变量配置
- 配置密码分布式集群环境hadoop、hbase、zookeeper搭建(全)
- Linux red hat 5 下tomcat的安装及其环境变量配置 启动
- jdk 环境变量配置及用命令编译.java类
- win7系统:ireport启动报异常 java.lang.NullPointerException,java环境变量已经正确配置
- Java学习总结(一)—— >Java环境变量的配置,DOS窗口的带包编译,Jdk1.5的两个新特性(可变参数和增强的for循环)
- Eclipse无法启动,已安装JDK,JRE,环境变量配置正确。
- Tomcat启动分析(我们为什么要配置CATALINA_HOME环境变量)
- 黑马程序员-----java常用命令与环境配置总结*
- 环境变量配置应该没有问题啊,startup.bat也能启动,就是tomcat7.exe运行时一闪而过
- Linux 启动时,先读取用户环境变量,即 /home/defonds/.bashrc 的设置。次读取所有用户环境变量,即 /etc/profile 中的配置。
- 集群环境下配置hadoop1.0,zookeeper,hbase
- 配置完jdk环境变量后无法使用系统命令
- centos5.5(64位)配置java环境变量,个人总结
- 配置环境变量 cmd 命令