利用开源软件架设中小型私有云存储系统【简要选型】
2013-10-23 05:32
344 查看
我们和业内一些知名公司实践验证的方案:
架构:HDFS + HBASE 比较容易做到P级。对于提供云存储服务的单位,访问上可以考虑前端再做热点缓存(SSD+服务化)。
软件选型:Cloudera CDH4
技术要求:高
另外可以考虑:GlusterFS + Cassandra:技术要求高。
灵活集群: FastDFS直接封装服务可以做到数百T,合理架设优化可以做到P级。文件大小不超过500M(概数)。技术要求较低。
混合集群:多种存储服务整合,上层使用统一服务,上层服务负责路由等工作。技术要求:很高。
更多系统信息,参见我在Qcon的演讲:
http://www.infoq.com/cn/presentations/jingdong-cloud-storage-services-applications-explore
ppt已经上传: http://download.csdn.net/detail/doliu6/6439741(可以做到比较大的中型)
架构:HDFS + HBASE 比较容易做到P级。对于提供云存储服务的单位,访问上可以考虑前端再做热点缓存(SSD+服务化)。
软件选型:Cloudera CDH4
技术要求:高
另外可以考虑:GlusterFS + Cassandra:技术要求高。
灵活集群: FastDFS直接封装服务可以做到数百T,合理架设优化可以做到P级。文件大小不超过500M(概数)。技术要求较低。
混合集群:多种存储服务整合,上层使用统一服务,上层服务负责路由等工作。技术要求:很高。
更多系统信息,参见我在Qcon的演讲:
http://www.infoq.com/cn/presentations/jingdong-cloud-storage-services-applications-explore
ppt已经上传: http://download.csdn.net/detail/doliu6/6439741(可以做到比较大的中型)
相关文章推荐
- 利用开源软件架设中小型私有云存储系统【简要选型】
- 利用开源日志收集软件fluentd收集日志到HDFS文件系统中
- 推荐系统开源软件列表汇总和点评
- 利用开源Snort软件在Windows平台搭建IDS入侵检测系统
- 有学生提到,在大学选课的时候,可以写一个“刷课机”的程序,利用学校选课系统的弱点或漏洞,帮助某些人选到某些课程。或者帮助用户刷购票网站,先买到火车票。这些软件合法么?符合道德规范么?是在“软件工程”的研究范围么?
- 推荐系统开源软件
- 推荐系统的常用算法,选择,漫谈,推荐系统开源软件汇总
- 如何制作装机启动盘及重装系统; 如何利用百度云盘下载MATLAB等资料软件 ;如何安装镜像ISO文件
- 中小型企业进销存软件选型——细节不能少
- ASP.NET中小型软件系统中复合条件的查询
- 推荐系统开源软件列表汇总和点评
- android学习笔记---53_采用网页设计软件界面,以及使用android系统内置的浏览器,利用js调用java方法
- 开源安卓系统《和码》输入软件与数据库
- 《开源框架那点事儿13》:基于开源框架做应用是未来中小型软件公司的发展趋势
- 采用开源软件搭建WebGIS系统(1)系统架构
- 利用开源工具搭一套汉英翻译系统(一):预处理工具
- 中小型嵌入式系统开发常用开源资源导航
- 推荐系统开源软件列表汇总和评点
- 开源软件包和环境管理系统Anaconda的安装使用
- Windows系统必备的30个免费开源软件