Hadoop 2.2.0 HDFS HA高可用安装与配置
2017-03-01 17:14
627 查看
概述
hadoop2.0 已经发布了稳定版本了,增加了很多特性,比如HDFS HA、YARN等。这里我们采用3台虚拟机安装的Hadoop 2.2.0 版本。需要注意的是apache提供的hadoop-2.2.0的安装包是在32位操作系统编译的,因为hadoop依赖一些C++ 的本地库,所以如果在64位的操作上安装hadoop-2.2.0就需要重新在64操作系统上重新编译(建议第一次安装用32位的系统)
由于前期下列准备工作比较简单,就不详细说明了 1.修改Linux主机名 2.修改IP 3.修改主机名和IP的映射关系 4.关闭防火墙 5.ssh免登陆 6.安装JDK,配置环境变量等
软件版本
CentOS 6.5 JDK 1.7 Hadoop 2.2.0
Hadoop集群规划
在hadoop2.0中通常由两个NameNode组成,一个处于active状态,另一个处于standby状态。Active NameNode对外提供服务,而Standby NameNode则不对外提供服务,仅同步active namenode的状态,以便能够在它失败时快速进行切换。hadoop2.0官方提供了两种HDFS HA的解决方案,一种是NFS,另一种是QJM。这里我们使用简单的QJM。在该方案中,主备NameNode之间通过一组JournalNode同步元数据信息,一条数据只要成功写入多数JournalNode即认为写入成功。通常配置奇数个JournalNode
这里还配置了一个zookeeper集群,用于ZKFC(DFSZKFailoverController)故障转移,当Active NameNode挂掉了,会自动切换Standby NameNode为standby状态
主机名 | IP | 安装的软件 | 运行的进程 |
---|---|---|---|
hadoop01 | 192.168.66.101 | hadoop、zookeeper | NameNode、DataNode、QuorumPeerMain、JournalNode、DFSZKFailoverController、ResourceManager、NodeManager |
hadoop02 | 192.168.66.102 | hadoop、zookeeper | NameNode、DataNode、QuorumPeerMain、JournalNode、DFSZKFailoverController、NodeManager |
hadoop03 | 192.168.66.103 | hadoop、zookeeper | DataNode、QuorumPeerMain、JournalNode、NodeManager |
1.安装配置zooekeeper集群
1.1 解压 tar -zxvf zookeeper-3.4.5.tar.gz -C /home/yeahi/ 1.2 修改配置 cd /home/yeahi/zookeeper-3.4.5/conf/ cp zoo_sample.cfg zoo.cfg vim zoo.cfg 修改:dataDir=/home/yeahi/zookeeper-3.4.5/tmp 在最后添加: server.1=hadoop01:2888:3888 server.2=hadoop02:2888:3888 server.3=hadoop03:2888:3888 保存退出 然后创建一个tmp文件夹 mkdir /home/yeahi/zookeeper-3.4.5/tmp 再创建一个空文件 touch /home/yeahi/zookeeper-3.4.5/tmp/myid 最后向该文件写入ID echo 1 > /home/yeahi/zookeeper-3.4.5/tmp/myid 1.3 将配置好的zookeeper拷贝到其他节点(首先分别在hadoop02、hadoop03 home目录下创建一个/home/yeahi目录:mkdir /itcast) scp -r /home/yeahi/zookeeper-3.4.5/ hadoop02:/home/yeahi scp -r /home/yeahi/zookeeper-3.4.5/ hadoop03:/home/yeahi 注意:修改hadoop02、hadoop03对应/itcast/zookeeper-3.4.5/tmp/myid内容 hadoop02: echo 2 > /home/yeahi/zookeeper-3.4.5/tmp/myid hadoop02: echo 3 > /home/yeahi/zookeeper-3.4.5/tmp/myid
2.安装配置hadoop集群
2.1 解压
tar -zxvf hadoop-2.2.0.tar.gz -C /home/yeahi
2.2 配置HDFS
(hadoop2.0所有的配置文件都在$HADOOP_HOME/etc/hadoop目录下) 将hadoop添加到环境变量中 vim /etc/profile export JAVA_HOME=/usr/java/jdk1.6.0_45 export HADOOP_HOME=/home/yeahi/hadoop-2.2.0 export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin cd /itcast/hadoop-2.2.0/etc/hadoop
2.2.1 修改hadoo-env.sh
export JAVA_HOME=/usr/java/jdk1.6.0_45
2.2.2 修改core-site.xml
<configuration> <!-- 指定hdfs的nameservice为ns1 --> <property> <name>fs.defaultFS</name> <value>hdfs://ns1</value> </property> <!-- 指定hadoop临时目录 --> <property> <name>hadoop.tmp.dir</name> <value>/home/yeahi/hadoop-2.2.0/tmp</value> </property> <!-- 指定zookeeper地址 --> <property> <name>ha.zookeeper.quorum</name> <value>hadoop01:2181,hadoop02:2181,hadoop03:2181</value> </property> </configuration>
2.2.3 修改hdfs-site.xml
<configuration> <!--指定hdfs的nameservice为ns1,需要和core-site.xml中的保持一致 --> <property> <name>dfs.nameservices</name> <value>ns1</value> </property> <!-- ns1下面有两个NameNode,分别是nn1,nn2 --> <property> <name>dfs.ha.namenodes.ns1</name> <value>nn1,nn2</value> </property> <!-- nn1的RPC通信地址 --> <property> <name>dfs.namenode.rpc-address.ns1.nn1</name> <value>hadoop01:9000</value> </property> <!-- nn1的http通信地址 --> <property> <name>dfs.namenode.http-address.ns1.nn1</name> <value>hadoop01:50070</value> </property> <!-- nn2的RPC通信地址 --> <property> <name>dfs.namenode.rpc-address.ns1.nn2</name> <value>hadoop02:9000</value> </property> <!-- nn2的http通信地址 --> <property> <name>dfs.namenode.http-address.ns1.nn2</name> <value>hadoop02:50070</value> </property> <!-- 指定NameNode的元数据在JournalNode上的存放位置 --> <property> <name>dfs.namenode.shared.edits.dir</name> <value>qjournal://hadoop01:8485;hadoop02:8485;hadoop03:8485/ns1</value> </property> <!-- 指定JournalNode在本地磁盘存放数据的位置 --> <property> <name>dfs.journalnode.edits.dir</name> <value>/home/yeahi/hadoop-2.2.0/journal</value> </property> <!-- 开启NameNode失败自动切换 --> <property> <name>dfs.ha.automatic-failover.enabled</name> <value>true</value> </property> <!-- 配置失败自动切换实现方式 --> <property> <name>dfs.client.failover.proxy.provider.ns1</name> <value>org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider</value> </property> <!-- 配置隔离机制 --> <property> <name>dfs.ha.fencing.methods</name> <value>sshfence</value> </property> <!-- 使用隔离机制时需要ssh免登陆 --> <property> <name>dfs.ha.fencing.ssh.private-key-files</name> <value>/root/.ssh/id_rsa</value> </property> </configuration>
2.2.4 修改slaves
hadoop01 hadoop02 hadoop03
2.3 配置YARN
2.3.1 修改yarn-site.xml<configuration> <!-- 指定resourcemanager地址 --> <property> <name>yarn.resourcemanager.hostname</name> <value>hadoop01</value> </property> <!-- 指定nodemanager启动时加载server的方式为shuffle server --> <property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle</value> </property> </configuration>
2.3.2 修改mapred-site.xml
<configuration> <!-- 指定mr框架为yarn方式 --> a599 ; <property> <name>mapreduce.framework.name</name> <value>yarn</value> </property> </configuration>
2.4 将配置好的hadoop拷贝到其他节点
scp -r /home/yeahi/hadoop-2.2.0/ hadoo02:/home/yeahi scp -r /home/yeahi/hadoop-2.2.0/ hadoo03:/home/yeahi
2.5启动zookeeper集群(分别在hadoop01、hadoop02、hadoop03上启动zk)
cd /itcast/zookeeper-3.4.5/bin/ ./zkServer.sh start 查看状态: ./zkServer.sh status (一个leader,两个follower)
2.6启动journalnode(在hadoop01上启动所有journalnode)
cd /home/yeahi/hadoop-2.2.0 sbin/hadoop-daemons.sh start journalnode (运行jps命令检验,多了JournalNode进程)
2.7 格式化HDFS
在hadoop01上执行命令: hadoop namenode -format
格式化后会在根据core-site.xml中的hadoop.tmp.dir配置生成个文件,这里我配置的是/home/yeahi/hadoop-2.2.0/tmp,然后将/home/yeahi/hadoop-2.2.0/tmp拷贝到hadoop02的/home/yeahi/hadoop-2.2.0/下。
scp -r tmp/ hadoop02:/home/yeahi/hadoop-2.2.0/
2.8 格式化ZK(在hadoop01上执行即可)
hdfs zkfc -formatZK
2.9 启动HDFS(在hadoop01上执行)
sbin/start-dfs.sh
2.10 启动YARN(在hadoop01上执行)
sbin/start-yarn.sh
验证
Hadoop Web UI访问
浏览器访问: http://192.168.1.201:50070 NameNode 'hadoop01:9000' (active) http://192.168.1.202:50070 NameNode 'hadoop02:9000' (standby)
验证HDFS HA
首先向hdfs上传一个文件 hadoop fs -put /etc/profile /profile hadoop fs -ls / 然后再kill掉active的NameNode kill -9 <pid of NN> 通过浏览器访问:http://192.168.1.202:50070 NameNode 'hadoop02:9000' (active) 这个时候hadoop02上的NameNode变成了active 在执行命令: hadoop fs -ls / -rw-r--r-- 3 root supergroup 1926 2014-02-06 15:36 /profile 刚才上传的文件依然存在!!! 手动启动那个挂掉的NameNode sbin/hadoop-daemon.sh start namenode 通过浏览器访问:http://192.168.1.201:50070 NameNode 'hadoop01:9000' (standby)
验证YARN:
运行一下hadoop提供的demo中的WordCount程序: hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.2.0.jar wordcount /profile /out 执行完成后,查看词频统计文件,hadoop fs -text /out/part* wordcount单词统计被成功统计出来,则大功告成!!!
相关文章推荐
- hadoop学习之HDFS(2.2):centOS7安装高可用(HA)完全分布式集群hadoop2.7.2
- 高可用,完全分布式Hadoop集群HDFS和MapReduce安装配置指南
- 第九章 搭建Hadoop 2.2.0版本HDFS的HA配置
- hadoop系列文档3-配置Hdfs高可用HA
- 搭建Hadoop 2.2.0版本HDFS的HA配置
- Hadoop 2、配置HDFS HA (高可用)
- 高可用,完全分布式Hadoop集群HDFS和MapReduce安装配置指南
- Hadoop之HDFS的配置------HA(高可用版本)
- hadoop(高可用HA)的安装和配置
- Hadoop 2.2.0版本HDFS的HA配置
- hadoop2.2.0集群的高可用HA及MapReduce简单配置
- 第九章 搭建Hadoop 2.2.0版本HDFS的HA配置
- Hadoop2.6.4 HA 高可用分布式集群安装配置详细步骤
- hadoop系列文档3-配置Hdfs高可用HA
- Hadoop 2、配置HDFS HA (高可用)
- Hadoop 2、配置HDFS HA (高可用)
- Hadoop 2.2.0 HDFS的HA配置
- 第九章 搭建Hadoop 2.2.0版本HDFS的HA配置
- Hadoop基础教程-第9章 HA高可用(9.2 HDFS 高可用配置)(草稿)
- hadoop-HA Hadoop 2.2.0版本HDFS的HA配置