Google文件系统(Google File System)论文
2009-02-05 14:55
162 查看
我们设计并实现了Google文件系统,一个为数据中心的大规模分布应用设计的可伸缩的分布文件系统。Google文件系统虽然运行在廉价的普遍硬件上,但是可以提供容错能力,为大量客户机提供高性能的服务。
我们的系统与许多以前的分布文件系统拥有许多相同的目标,但我们的设计还受到我们对我们的应用负载和技术环境观察的影响,不管现在还是将来,我们和早期文件系统的假设都有明显的不同。所以我们重新审视了传统的选择,发展了完全不同的设计观点。
Google文件系统成功的满足了我们的存储需求。它作为存储平台被广泛的部署在Google内部,用在我们的服务中产生和处理数据,还用于那些需要大规模数据集的研究和开发。目前为止最大的集群利用数千台机器内的数千个硬盘,提供了数百T的存储空间,同时为数百个客户机服务。
在这篇论文中,我们展现如果用文件系统接口扩展设计去支撑分布应用,讨论我们设计的许多方面,最后报告在小规模性能测试以及真实世界中系统的性能测试结果。
在 http://www.codechina.org/doc/google/gfs-paper/可以看到完整的论文!
我们的系统与许多以前的分布文件系统拥有许多相同的目标,但我们的设计还受到我们对我们的应用负载和技术环境观察的影响,不管现在还是将来,我们和早期文件系统的假设都有明显的不同。所以我们重新审视了传统的选择,发展了完全不同的设计观点。
Google文件系统成功的满足了我们的存储需求。它作为存储平台被广泛的部署在Google内部,用在我们的服务中产生和处理数据,还用于那些需要大规模数据集的研究和开发。目前为止最大的集群利用数千台机器内的数千个硬盘,提供了数百T的存储空间,同时为数百个客户机服务。
在这篇论文中,我们展现如果用文件系统接口扩展设计去支撑分布应用,讨论我们设计的许多方面,最后报告在小规模性能测试以及真实世界中系统的性能测试结果。
在 http://www.codechina.org/doc/google/gfs-paper/可以看到完整的论文!
相关文章推荐
- Google文件系统(Google File System)论文
- Google分布式系统三大论文(二)Bigtable: A Distributed Storage System for Structured Data
- Google论文(1) GFS:Google文件系统 - 思维导图
- Google论文(1) GFS:Google文件系统 - 思维导图
- Google关于GFS(Google File System)技术论文中文版
- 【Google 年度顶级论文】机器学习系统,隐藏多少技术债?
- Google分布式系统三大论文(三)MapReduce: Simplified Data Processing on Large Clusters
- Google File System 论文(中文翻译)
- 谷歌三大核心技术(一)Google File System - 系统设计
- google三大论文这 --Google File System(中文翻译)
- Google文件系统(Google File System)
- Google 顶级论文:机器学习系统,隐藏多少技术债?
- Google 三大论文中文版之一个分布式的结构化数据存储系统
- GFS论文-Google File System(中文翻译)
- 转:Google论文之二----Google文件系统(GFS)翻译学习
- Google 分布式系统三大论文(一)The Google File System
- Google论文之二----Google文件系统(GFS)翻译学习
- 原生Android系统的第一次开机google验证的解决
- NFS中小企业常见的网络文件系统服务(network file system)
- Google 抢先公布 OS X 的系统漏洞