4-hadoop架构分析
2016-06-18 13:41
441 查看
hadoop单节点系统结构和集群结构,看相关的ppt
名称节点:
只有一个
存储文件元数据,比如目录
只对元数据的增删做日记记录,对其他的block和文件流操作不做记录
datanode故障时,创建更多的副本Block
元数据--数据块block
元数据:源数据文件。一个元数据可以被分割成多个数据块Block。
hadoop的启动脚本
start-all.cmd
初始化一些基础环境变量的目录
hadoop的环境变量
Java的环境变量
加载hadoop配置-->/libexec/hadoop-config.cmd
加载java和hadoop的基础jar包
hadoop的启动脚本之间的关系图,详见hadoop脚本启动分析全图.jpg.
关系图解释:
名称节点:
只有一个
存储文件元数据,比如目录
只对元数据的增删做日记记录,对其他的block和文件流操作不做记录
datanode故障时,创建更多的副本Block
元数据--数据块block
元数据:源数据文件。一个元数据可以被分割成多个数据块Block。
hadoop的启动脚本
start-all.cmd
初始化一些基础环境变量的目录
hadoop的环境变量
Java的环境变量
加载hadoop配置-->/libexec/hadoop-config.cmd
加载java和hadoop的基础jar包
hadoop的启动脚本之间的关系图,详见hadoop脚本启动分析全图.jpg.
关系图解释:
相关文章推荐
- 详解HDFS Short Circuit Local Reads
- Hadoop_2.1.0 MapReduce序列图
- 使用Hadoop搭建现代电信企业架构
- 单机版搭建Hadoop环境图文教程详解
- hadoop常见错误以及处理方法详解
- hadoop 单机安装配置教程
- hadoop的hdfs文件操作实现上传文件到hdfs
- hadoop实现grep示例分享
- Apache Hadoop版本详解
- linux下搭建hadoop环境步骤分享
- hadoop client与datanode的通信协议分析
- hadoop中一些常用的命令介绍
- Hadoop单机版和全分布式(集群)安装
- 用PHP和Shell写Hadoop的MapReduce程序
- hadoop map-reduce中的文件并发操作
- Hadoop1.2中配置伪分布式的实例
- hadoop上传文件功能实例代码
- java结合HADOOP集群文件上传下载
- Hadoop 2.x伪分布式环境搭建详细步骤
- Java访问Hadoop分布式文件系统HDFS的配置说明