Hadoop:HDFS的特性
2016-07-27 11:17
309 查看
Hadoop培训内容:HDFS的特性,HDFS和传统的分布式文件系统相比较,具有以下明显的特性:
高度容错,可扩展性及可配置性强。由于容错性高,因此非常适合部署利用通用的硬件平台构建容错性很高的分布式系统。容易扩展是指扩展无须改变架构只需要增加节点即可,同时可配置性很强。
跨平台。使用Java语言开发,支持多个主流平台环境。
shell命令接口。和Linux文件系统一样,拥有文件系统shell命令,可直接操作HDFS。
Web界面。NameNode和DataNode有内置的Web服务器,方便用户检查集群的当前状态。
文件权限和授权。拥有和Linux系统类似的文件权限管理。
机架感知功能。在调度任务和分配存储空间时系统会考虑节点的物理位置,从而实现高效访问和计算。
安全模式。一种维护需要的管理模式。
Rebalancer。当DataNode之间数据不均衡时,可以平衡集群上的数据负载,实现数据负载均衡。
升级和回滚。在软件更新后有异常发生的情形下,能够回滚到HDFS升级之前的状态。
高度容错,可扩展性及可配置性强。由于容错性高,因此非常适合部署利用通用的硬件平台构建容错性很高的分布式系统。容易扩展是指扩展无须改变架构只需要增加节点即可,同时可配置性很强。
跨平台。使用Java语言开发,支持多个主流平台环境。
shell命令接口。和Linux文件系统一样,拥有文件系统shell命令,可直接操作HDFS。
Web界面。NameNode和DataNode有内置的Web服务器,方便用户检查集群的当前状态。
文件权限和授权。拥有和Linux系统类似的文件权限管理。
机架感知功能。在调度任务和分配存储空间时系统会考虑节点的物理位置,从而实现高效访问和计算。
安全模式。一种维护需要的管理模式。
Rebalancer。当DataNode之间数据不均衡时,可以平衡集群上的数据负载,实现数据负载均衡。
升级和回滚。在软件更新后有异常发生的情形下,能够回滚到HDFS升级之前的状态。
相关文章推荐
- 关于加载器ld-linux-armhf.so.3
- write和fwrite函数(文件描述符)
- MVC+EasyUI+三层架构简单权限管理系统
- Flume+Hadoop+Hive的离线分析系统基本架构
- linux中的多语言环境(LC_ALL, LANG, locale)
- linux操作系统从服务器上下载&上传
- 1分钟完成:linux定时清理日志
- 交互式SHELL和非交互式SHELL、登录SHELL和非登录SHELL的区别
- linux运维面试总结
- leetcode ----Intersection of Two Arrays
- Linux常用命令
- Linux 学习笔记之 CentOS7 安装
- Linux中命令历史history及man帮助手册的相关理解和使用
- OpenCV Core模块
- DependencyProperty深入浅出
- codeforces-385C Bear and Prime Numbers(素数筛选法+维护前缀和)
- 怎么访问非网站项目下的文件(图片)
- windows进程通信WM_COPYDATA
- Tomcat热加载的三种方式
- linux 下 MYSQL 命令大全