Zookeeper集群安装配置
2016-07-11 18:32
288 查看
ZooKeeper是一个分布式开源框架,提供了协调分布式应用的基本服务,
它向外部应用暴露一组通用服务——分布式同步(Distributed Synchronization)、命名服务(Naming Service)、集群维护(Group Maintenance)等,简化分布式应用协调及其管理的难度,提供高性能的分布式服务。ZooKeeper本身可以以Standalone模式安装运行,不过它的长处在于通过分布式ZooKeeper集群(一个Leader,多个Follower),基于一定的策略来保证ZooKeeper集群的稳定性和可用性,从而实现分布式应用的可靠性。
将zookeeper-3.3.4/conf目录下面的 zoo_sample.cfg修改为zoo.cfg,配置文件内容如下所示:
tickTime=2000
dataDir=/home/hadoop/storage/zookeeper
clientPort=2181
initLimit=5
syncLimit=2
下面启动ZooKeeper服务器进程:
cd zookeeper/
bin/zkServer.sh start
通过jps命令可以查看ZooKeeper服务器进程,名称为QuorumPeerMain。
在客户端连接ZooKeeper服务器,执行如下命令:
bin/zkCli.sh -server dynamic:2181
首先要明确的是,ZooKeeper集群是一个独立的分布式协调服务集群,“独立”的含义就是说,如果想使用ZooKeeper实现分布式应用的协调与管理,
简化协调与管理,任何分布式应用都可以使用,这就要归功于Zookeeper的数据模型(Data Model)和层次命名空间(Hierarchical Namespace)
结构,
第一步:修改ZooKeeper配置文件
在其中一台机器上,解压缩zookeeper-3.3.4.tar.gz,修改配置文件conf/zoo.cfg,内容如下所示:
bin/zkCli.sh
tickTime=2000
dataDir=/usr/zookeeper
clientPort=2181
initLimit=5
syncLimit=2
server.0=node1:2888:3888
server.1=node2:2888:3888
server.2=node3:2888:3888
第二步:远程复制分发安装文件
上面已经在一台机器node1上配置完成ZooKeeper,现在可以将该配置好的安装文件远程拷贝到集群中的各个结点对应的目录下:
cd /usr/
scp -r ./zookeeper/ hadoop@node2:/usr/
scp -r zookeeper/ hadoop@node3:/usr/
第三步:设置myid
在我们配置的dataDir指定的目录下面,创建一个myid文件,里面内容为一个数字,用来标识当前主机,conf/zoo.cfg文件中配置的server.X中X为什么数字,则myid文件中就输入这个数字,例如:
hadoop@node1: echo "0" > /usr/zookeeper/myid
hadoop@node2: echo "1" > /usr/zookeeper/myid
hadoop@node3: echo "2" > /usr/zookeeper/myid
第四步:启动
bin/zkServer.sh start
可以通过ZooKeeper的脚本来查看启动状态,包括集群中各个结点的角色(或是Leader,或是Follower),如下所示,是在ZooKeeper集群中的每个结点上查询的结果:
hadoop@node1: bin/zkServer.sh status
JMX enabled by default
Using config: /usr/zookeeper/bin/../conf/zoo.cfg
Mode: follower
hadoop@node2: bin/zkServer.sh status
JMX enabled by default
Using config: /usr/zookeeper/bin/../conf/zoo.cfg
Mode: leader
hadoop@node3: bin/zkServer.sh status
JMX enabled by default
Using config: /usr/zookeeper/bin/../conf/zoo.cfg
Mode: follower
它向外部应用暴露一组通用服务——分布式同步(Distributed Synchronization)、命名服务(Naming Service)、集群维护(Group Maintenance)等,简化分布式应用协调及其管理的难度,提供高性能的分布式服务。ZooKeeper本身可以以Standalone模式安装运行,不过它的长处在于通过分布式ZooKeeper集群(一个Leader,多个Follower),基于一定的策略来保证ZooKeeper集群的稳定性和可用性,从而实现分布式应用的可靠性。
ZooKeeper Standalone模式
从Apache网站上(zookeeper.apache.org)下载ZooKeeper软件包,我选择了3.3.4版本的(zookeeper-3.3.4.tar.gz),在一台Linux机器上安装非常容易,只需要解压缩后,简单配置一下即可以启动ZooKeeper服务器进程。将zookeeper-3.3.4/conf目录下面的 zoo_sample.cfg修改为zoo.cfg,配置文件内容如下所示:
tickTime=2000
dataDir=/home/hadoop/storage/zookeeper
clientPort=2181
initLimit=5
syncLimit=2
下面启动ZooKeeper服务器进程:
cd zookeeper/
bin/zkServer.sh start
通过jps命令可以查看ZooKeeper服务器进程,名称为QuorumPeerMain。
在客户端连接ZooKeeper服务器,执行如下命令:
bin/zkCli.sh -server dynamic:2181
ZooKeeper Distributed模式
ZooKeeper分布式模式安装(ZooKeeper集群)也比较容易,这里说明一下基本要点。首先要明确的是,ZooKeeper集群是一个独立的分布式协调服务集群,“独立”的含义就是说,如果想使用ZooKeeper实现分布式应用的协调与管理,
简化协调与管理,任何分布式应用都可以使用,这就要归功于Zookeeper的数据模型(Data Model)和层次命名空间(Hierarchical Namespace)
结构,
第一步:修改ZooKeeper配置文件
在其中一台机器上,解压缩zookeeper-3.3.4.tar.gz,修改配置文件conf/zoo.cfg,内容如下所示:
bin/zkCli.sh
tickTime=2000
dataDir=/usr/zookeeper
clientPort=2181
initLimit=5
syncLimit=2
server.0=node1:2888:3888
server.1=node2:2888:3888
server.2=node3:2888:3888
第二步:远程复制分发安装文件
上面已经在一台机器node1上配置完成ZooKeeper,现在可以将该配置好的安装文件远程拷贝到集群中的各个结点对应的目录下:
cd /usr/
scp -r ./zookeeper/ hadoop@node2:/usr/
scp -r zookeeper/ hadoop@node3:/usr/
第三步:设置myid
在我们配置的dataDir指定的目录下面,创建一个myid文件,里面内容为一个数字,用来标识当前主机,conf/zoo.cfg文件中配置的server.X中X为什么数字,则myid文件中就输入这个数字,例如:
hadoop@node1: echo "0" > /usr/zookeeper/myid
hadoop@node2: echo "1" > /usr/zookeeper/myid
hadoop@node3: echo "2" > /usr/zookeeper/myid
第四步:启动
bin/zkServer.sh start
可以通过ZooKeeper的脚本来查看启动状态,包括集群中各个结点的角色(或是Leader,或是Follower),如下所示,是在ZooKeeper集群中的每个结点上查询的结果:
hadoop@node1: bin/zkServer.sh status
JMX enabled by default
Using config: /usr/zookeeper/bin/../conf/zoo.cfg
Mode: follower
hadoop@node2: bin/zkServer.sh status
JMX enabled by default
Using config: /usr/zookeeper/bin/../conf/zoo.cfg
Mode: leader
hadoop@node3: bin/zkServer.sh status
JMX enabled by default
Using config: /usr/zookeeper/bin/../conf/zoo.cfg
Mode: follower
相关文章推荐
- Android的Canvas绘制正弦函数图像
- viewpager的优化
- JavaScript全局函数
- 【乐畅】工作积累 ---- 设置一个弹窗的层
- Python使用struct处理二进制
- redis介绍、主从配置
- [Cloud Computing]Mechanisms: Domain Name Service
- linux echo
- centos7之lamp环境搭建
- poj 3648 2-SAT算法
- 如何在storm应用中实现定时调度
- express 4.0 新属性
- ItemTouchHleper实现RecyclerView侧滑删除
- 【Python学习笔记】正则表达式
- C++命名空间 namespace的作用和使用解析
- Python之函数
- 导入安卓项目的时候,发生错误:Cause: peer not authenticated
- 各种排序算法的讲解与代码实现
- [Cloud Computing]Mechanisms: Digital Signature
- java图片和base64互转实例