Hadoop HDFS 架构
2017-04-26 09:34
148 查看
构成HDFS 集群的主要是两个节点,并且,以主从(master/slave ) 的模式,或者说是NameNode管理者-DataNode工作者的模式运行,一般来说,都是一个管理者对应多个工作者。还有一个节点,叫做SecondaryNameNode,作为NameNode镜像数据备份。
NameNode:
数目:1个;
作用:存储文件系统的元数据,存储文件与数据块的映射,并提供文件系统的全景图。
SecondaryNameNode:
数目:一个
作用:备份NameNode 数据,并负责镜像与NameNode日志数据的合并。
DataNode:
数目:最少一个
作用:存储数据块。
架构图 如下:
![](https://img-blog.csdn.net/20170426093219376?watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQvdTAxMDgwMTQzOQ==/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA==/dissolve/70/gravity/Center)
本文参考书籍------Hadoop海量数据处理 技术详解与项目实战
NameNode:
数目:1个;
作用:存储文件系统的元数据,存储文件与数据块的映射,并提供文件系统的全景图。
SecondaryNameNode:
数目:一个
作用:备份NameNode 数据,并负责镜像与NameNode日志数据的合并。
DataNode:
数目:最少一个
作用:存储数据块。
架构图 如下:
本文参考书籍------Hadoop海量数据处理 技术详解与项目实战
相关文章推荐
- Hadoop之HDFS架构(NameNode和DataNode)
- hadoop2.6.0理论:hdfs、yarn、mapreduce的架构
- Hadoop核心架构HDFS+MapReduce+Hbase+Hive内部机理详解
- HADOOP学习连载:HDFS架构解读
- hadoop学习之路----HDFS原理与基本架构总结(第二讲)
- hadoop架构分析之启动脚本分析(hdfs部分)
- HDFS架构(Apache Hadoop 2.1.1-beta)
- Hadoop7-HDFS的NameNode的元数据管理机制与Hadoop的高可用架构
- Hadoop学习之HDFS架构(一)
- 大数据Hadoop核心架构HDFS+MapReduce+Hbase+Hive内部机理详解
- 大数据1-hadoop架构体系中的【Hadoop】HDFS的运行原理
- Hadoop核心之HDFS 架构设计
- hadoop入门(2)——HDFS2.0应用场景、原理、基本架构及使用方法
- Hadoop:HDFS架构
- (2)hadoop学习——hdfs架构详解
- Hadoop分布式文件系统HDFS:架构和设计(转)
- Hadoop学习之HDFS架构(二)
- Hadoop HDFS分布式文件系统设计要点与架构(转摘)
- Hadoop1.x HDFS系统架构
- hadoop初识之六:HDFS架构及linux下eclipse环境的准备