hadoop学习笔记之zookeeper 安装配置
2017-03-07 22:29
381 查看
初识zookeeper
ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。由于工程师不能很好地使用锁机制以及基于消息协调机制有时候不适合使用,因此需要一种可靠的、方便的协调服务。zookeeper就解决了这样的问题,避免竞争条件和死锁的问题。
有关zookeeper原理可参考:http://cailin.iteye.com/blog/2014486/
安装
1.安装包下载
目前(2017年3月7号)稳定最高版本是3.4.9,下载地址:https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/zookeeper-3.4.9/zookeeper-3.4.9.tar.gz2.解压到用户目录下并配置环境变量
gedit ~/.bashrc 添加: export ZOOKEEPER_HOME=解压路径 export path=${ZOOKEEPER_HOME}/bin 保存之后 source ~/.bashrc
3.配置zoo.cfg
新建zoo.cfg文件并添加如下内容单机版
tickTime=2000 dataDir=/home/user/hadoop/zookeeper-3.4.9/data clientPort=2181
多节点版
(最少三个节点)每个节点都需要复制一份zookeeper
tickTime=2000 dataDir=/home/user/hadoop/zookeeper-3.4.9/data clientPort=2181
initLimit=5
syncLimit=2
server.1=zoo1:2888:3888
server.2=zoo2:2888:3888
server.3=zoo3:2888:3888
配置日志输出目录(log4j.properties)
zookeeper.log.dir=/home/user/hadoop/zookeeper-3.4.9/logs
4.启动zookeeper
zkServer.sh start
5.操作zookeeper
#连接Connection zkCli.sh -server 127.0.0.1:2181 PS:对于完全分布式版本,需要在datadir下(zoo.cfg配置文件中可看到具体路径)新建myid,其中存放对应id(1 2 3,对应配置文件中server.x=... 其中x对应id)
相关文章推荐
- 【Hadoop学习笔记】安装配置
- hadoop学习笔记之-生产环境Hadoop大集群配置安装
- Hadoop学习笔记-009-CentOS_6.5_64_HA高可用-Hadoop2.6+Zookeeper3.4.5安装Hive1.1.0
- hadoop学习笔记之安装配置和单机运行
- Hadoop学习笔记(1)安装配置与运行
- 【hadoop】学习笔记-安装配置
- Hadoop学习笔记(二)----环境搭建之CentOS 7 配置与安装Hadoop
- 第116讲:Hadoop集群之安装Java、创建Hadoop用户、配置SSH等实战学习笔记
- Hadoop学习笔记-011-CentOS_6.5_64_HA高可用-Zookeeper3.4.5安装Kafka+消息监控KafkaOffsetMonitor
- Hadoop学习笔记(十三)---Hbase的伪分布安装及配置
- 【hadoop】学习笔记-安装配置
- Hadoop学习笔记(十一)---hadoop集群安装及配置
- Hadoop学习笔记(十四)---Hbase集群安装及配置
- Hadoop学习笔记-006-CentOS_6.5_64_HA高可用-安装Zookeeper3.4.5
- Hadoop学习笔记(一)——安装与配置
- Hadoop学习笔记0001——Hadoop安装配置
- hadoop学习笔记之-生产环境Hadoop大集群配置安装
- hadoop学习笔记七 -- hadoop集群高可用架构安装配置
- hadoop学习之zookeeper(6):zookeeper的安装配置
- 第117讲:Hadoop集群之安装IP配置、Slaves、namenode和secondarynamenode的配置学习笔记