hadoop 2.x之HDFS HA讲解之七根据官方文档一步一步的配置HDFS HA
2016-09-24 19:22
465 查看
首先我们给出官方配置HA的文档:HDFS High Availability Using the Quorum Journal Manager 。
然后我们根据官方的文档一步一步的去配置HDFS HA。
首先我们把JDK配置好,在hadoop-env.sh配置文件中:
根据我的总结,大概分为下面几步:
第一:在hdfs-site.xml配置文件中,配置Active NameNode 和 Standby NameNode的地址。
首先配置nameservice, 然后在我们配置的nameservice下面配置两个namenode。
其次配置nn1的相关地址信息:
最后配置nn2的相关地址信息:
第二:在hdfs-site.xml配置文件中,配置Active NameNode 和 Standby NameNode的本地存储路径。
第三:在hdfs-site.xml配置文件中,配置关于QJM方面的配置。指定NameNode的元数据在JournalNode上的存放
位置,指定JournalNode在本地磁盘存放数据的位置。
第四:在hdfs-site.xml配置文件中,隔离fencing配置,配置两节点之间的相互SSH无密码登录。
第五:在core-site.xml配置文件中,HDFS
namespace访问配置。
到此,我们已经配置完成了,只不过我们只是在一台机器上配置完成了,我们需要将配置好的全部复制到其他的机器
上面去。
然后我们根据官方的文档一步一步的去配置HDFS HA。
首先我们把JDK配置好,在hadoop-env.sh配置文件中:
根据我的总结,大概分为下面几步:
第一:在hdfs-site.xml配置文件中,配置Active NameNode 和 Standby NameNode的地址。
首先配置nameservice, 然后在我们配置的nameservice下面配置两个namenode。
其次配置nn1的相关地址信息:
最后配置nn2的相关地址信息:
第二:在hdfs-site.xml配置文件中,配置Active NameNode 和 Standby NameNode的本地存储路径。
第三:在hdfs-site.xml配置文件中,配置关于QJM方面的配置。指定NameNode的元数据在JournalNode上的存放
位置,指定JournalNode在本地磁盘存放数据的位置。
第四:在hdfs-site.xml配置文件中,隔离fencing配置,配置两节点之间的相互SSH无密码登录。
第五:在core-site.xml配置文件中,HDFS
namespace访问配置。
到此,我们已经配置完成了,只不过我们只是在一台机器上配置完成了,我们需要将配置好的全部复制到其他的机器
上面去。
相关文章推荐
- hadoop系列文档3-配置Hdfs高可用HA
- hadoop 2.x之HDFS HA讲解之五 HA管理命令、元数据同步和基于QJM方式存储的硬件配置说明
- hadoop 2.x之HDFS HA讲解之十一测试failover故障转移和隔离、使用sshfence隔离的配置ssh无密钥登陆
- hadoop系列文档3-配置Hdfs高可用HA
- hadoop 2.x之HDFS HA讲解之十二基于已有HDFS集群配置NN HA
- Hadoop 2.2.0版本HDFS的HA配置
- Hadoop 2.2.0 HDFS的HA配置
- hadoop 2.x之HDFS HA讲解之十WEB UI监控页面分析和查看NN与JN存储的编辑日志
- 国内第一篇详细讲解hadoop2的automatic HA+Federation+Yarn配置的教程
- Centos 6.5 下hadoop2.5.2的HA集群原理讲解以及详细配置(自动切换)
- hadoop系列文档4-配置Yarn高可用HA
- 搭建Hadoop 2.2.0版本HDFS的HA配置
- hadoop 2.x之HDFS HA讲解之九HDFS HA测试启动服务进程、页面监控查看和解决问题
- 第九章 搭建Hadoop 2.2.0版本HDFS的HA配置
- HBase有关HDFS配置的官方文档记录
- Oracle 10g 单实例数据库Data Guard 之 Logical Standby 配置详解(根据官方文档总结)
- 第九章 搭建Hadoop 2.2.0版本HDFS的HA配置
- 国内第一篇详细讲解hadoop2的automatic HA+Federation+Yarn配置的教程
- 国内第一篇详细讲解hadoop2的automatic HA+Federation+Yarn配置的教程
- hadoop 2.x之HDFS HA讲解之六 HA机器规划