分布式文件系统发展史(动态图片,点击就能看到动态模拟)
2014-10-09 10:02
337 查看
分布式存储在大数据、云计算、虚拟化场景都有勇武之地,在大部分场景还至关重要。
对于一个IT从业人员,学习分布式存储相关基础知识必不可少。
今天给大家简要介绍*nix平台下分布式文件系统的发展历史。
1、单机文件系统
用于操作系统和应用程序的本地存储。
缺点:数据无法再服务器之间共享。
典型代表:Ext2、Ext3、Ex4、NTFS、FAT、FAT32、XFS、JFS...
IO模型:
2、网络文件系统(简称:NAS)
基于现有以太网架构,实现不同服务器之间传统文件系统数据共享。
缺点:两台服务器不能同时访问修改,性能有限。
典型代表:NFS、CIFS
IO模型:
3、集群文件系统
在共享存储基础上,通过集群锁,实现不同服务器能够共用一个传统文件系统。
缺点:性能一般,扩展性很有限(小于16台服务器)。
典型代表:GFS(Redhat)、GFS2(Redhat)、OCFS(Oracle)
IO模型:
GFS、GFS2模型如下:
默认上面三种文件系统模块都位于内核里面,NFS over Inifiband可以使用kernel bypass绕开内核。
4、分布式文件系统
在传统文件系统上,通过额外模块实现数据跨服务器分布,并且自身集成raid保护功能,可以保证多台服务器同时访问、修改同一个文件系统。性能优越,扩展性很好,成本低廉。
缺点:适用场景单一,部分类型存在单点故障风险。
典型代表:lustre(Oracle)、HDFS(ASF)、gluster(Redhat)
IO模型:
主要分两大类型:一种是元数据集中管理模型;另一种是元数据分散管理模型
lustre(Oracle)
HDFS(ASF)
lustre和HDFS是元数据集中管理典型代表。实际数据分布存放在数据服务器上,元数据服务器负责IO请求调配,空间分配;非常适用于大文件存储。
元数据服务器可能成为系统扩展的瓶颈。
gluster(Redhat)
gluster是元数据分散管理模型典型代表,元数据被分散放置到所有服务器上,不存在元数据单点故障。非常适用于小文件存储。
参考资料:
http://www.stalker.com/notes/SFS.html
https://access.redhat.com/knowledge/docs/en-US/Red_Hat_Enterprise_Linux/6/html/Global_File_System_2/index.html
http://wiki.lustre.org/index.php/Main_Page
https://access.redhat.com/knowledge/docs/en-US/Red_Hat_Storage/2.0/html-single/Administration_Guide/index.html#sect-Administration_Guide-intro_arch-Test_Section
http://www.gluster.org/
对于一个IT从业人员,学习分布式存储相关基础知识必不可少。
今天给大家简要介绍*nix平台下分布式文件系统的发展历史。
1、单机文件系统
用于操作系统和应用程序的本地存储。
缺点:数据无法再服务器之间共享。
典型代表:Ext2、Ext3、Ex4、NTFS、FAT、FAT32、XFS、JFS...
IO模型:
2、网络文件系统(简称:NAS)
基于现有以太网架构,实现不同服务器之间传统文件系统数据共享。
缺点:两台服务器不能同时访问修改,性能有限。
典型代表:NFS、CIFS
IO模型:
3、集群文件系统
在共享存储基础上,通过集群锁,实现不同服务器能够共用一个传统文件系统。
缺点:性能一般,扩展性很有限(小于16台服务器)。
典型代表:GFS(Redhat)、GFS2(Redhat)、OCFS(Oracle)
IO模型:
GFS、GFS2模型如下:
默认上面三种文件系统模块都位于内核里面,NFS over Inifiband可以使用kernel bypass绕开内核。
4、分布式文件系统
在传统文件系统上,通过额外模块实现数据跨服务器分布,并且自身集成raid保护功能,可以保证多台服务器同时访问、修改同一个文件系统。性能优越,扩展性很好,成本低廉。
缺点:适用场景单一,部分类型存在单点故障风险。
典型代表:lustre(Oracle)、HDFS(ASF)、gluster(Redhat)
IO模型:
主要分两大类型:一种是元数据集中管理模型;另一种是元数据分散管理模型
lustre(Oracle)
HDFS(ASF)
lustre和HDFS是元数据集中管理典型代表。实际数据分布存放在数据服务器上,元数据服务器负责IO请求调配,空间分配;非常适用于大文件存储。
元数据服务器可能成为系统扩展的瓶颈。
gluster(Redhat)
gluster是元数据分散管理模型典型代表,元数据被分散放置到所有服务器上,不存在元数据单点故障。非常适用于小文件存储。
参考资料:
http://www.stalker.com/notes/SFS.html
https://access.redhat.com/knowledge/docs/en-US/Red_Hat_Enterprise_Linux/6/html/Global_File_System_2/index.html
http://wiki.lustre.org/index.php/Main_Page
https://access.redhat.com/knowledge/docs/en-US/Red_Hat_Storage/2.0/html-single/Administration_Guide/index.html#sect-Administration_Guide-intro_arch-Test_Section
http://www.gluster.org/
相关文章推荐
- 另种思路:图片转换 变通模拟实现VS2005下TreeView的ChcekBox点击
- jquery 滚动条动态图片加载(模拟淘宝商城图片加载)
- 高仿新浪点击图片放大(可以拖动,动态缩小放大,以及再次点击图片消失和保存图片的功能)
- eclipse如何点击png或者jpg格式图片就能预览
- iOS类似微信点击评论或者回复 键盘出来 点击评论动态所在cell动态调整到键盘上方 方便用户看到自己所评论的
- 动态图片轮流播而且点击图片时连接到一个新闻地址
- st7735 4000 s SPI驱动 模拟电池充电动态显示图片
- 模拟 手机QQ 点击头部图片 使其变成半透明 使用一张图片实现此效果
- Python+Ghost抓取动态网页图片,并模拟页面Get请求
- GridView的最后固定显示一个增加图片,点击图片动态增加内容item
- Silverlight实用窍门系列:8. Accordion模拟菜单,Accordion动态绑定数据,模拟菜单点击【附带源码实例】
- 模拟js的首页动态推荐页面 Gallery 自动播放 无限循环 指示器显示 点击事件
- 模拟js的首页动态推荐页面 Gallery 自动播放 无限循环 指示器显示 点击事件
- 点击图片特定区域实现图片动态切换(图片热点、谷歌手形切换)
- 转载:js实现上传图片时 点击浏览后 就可以看到缩略图 很实用
- 另种思路:图片转换 变通模拟实现VS2005下TreeView的ChcekBox点击
- jQuery 滚动条动态图片加载(模拟淘宝商城图片加载)
- gallery中的图片没法点击,或者 glallery中的图片不能滑动但是能点击,用ontouch事件模拟onclick 点击事件
- 模拟点击事件动态增删元素