开源解决方案Apache Hadoop破世界数据排序记录
2009-11-12 13:20
211 查看
雅虎的网格计算团队宣布，他们使用开源解决方案Apache Hadoop在GraySort年度比赛中，打破了世界数据排序记录。Apache Hadoop在Sort Benchmark的Daytona类比赛中，分别在Gray和Minute排序中占优。Apache Hadoop排序1TB数据用时62秒，1PB数据用时16.25个小时，它是至今赢得竞赛的唯一一款开源软件。
ps:才看见的新闻，不过据说是5月份的事情了。
In early 2008, Google announced that it processes 20 petabytes of data a day with
MapReduce 阅读更多
ps:才看见的新闻，不过据说是5月份的事情了。
In early 2008, Google announced that it processes 20 petabytes of data a day with
MapReduce 阅读更多
内容来自用户分享和网络整理，不保证内容的准确性，如有侵权内容，可联系管理员处理 
相关文章推荐
- Atitit.并发测试解决方案(2) -----获取随机数据库记录 随机抽取数据 随机排序 原理and实现
- Atitit.并发测试解决方案(2) -----获取随机数据库记录 随机抽取数据 随机排序 原理and实现
- Apache Eagle——eBay开源分布式实时Hadoop数据安全方案
- Hadoop和大数据：60款顶级开源工具
- HDFS上数据保存到Hbase运行报错：NoClassDefFoundError: org/apache/hadoop/hbase/HBaseConfiguration
- Mysql分组统计、排序、取前N条记录解决方案
- mysql选择上一条、下一条数据记录，排序上移、下移、置顶
- Hadoop自定义排序和自定义数据类型使用（setSortComparatorClass和setGroupingComparatorClass）
- Hadoop和大数据：60款顶级开源工具
- hadoop 异常记录 ERROR: org.apache.hadoop.hbase.MasterNotRunningException: Retried 7 times
- 阿里封神谈hadoop学习之路 封神 2016-04-14 16:03:51 浏览3283 评论3 发表于： 阿里云E-MapReduce >> 开源大数据周刊 hadoop 学生 spark
- Hadoop记录——hive中的decimal字段，shell的数据类型以及sqoop导出空string报错
- 【伊利丹】Hadoop-2.5.0-CDH5.2.0 版本升级和数据均衡 实验记录
- 中国团队夺得MegaFace百万人脸识别冠军，精度98%再创记录，论文代码+数据全开源
- hadoop记录篇6-数据仓库hive
- org.apache.hadoop.hbase.mapreduce.Driver 导入数据到HBASE table
- Hadoop——自定义数据类型，实现WritableComparable, 并且 分组，排序
- 每一天都有更多的数据、用户和应用在加入Apache Hadoop这个日益壮大的集群中来。虽然对于整个数据驱动的组织来说这是一个好消息，但对于安全管理员和监察人员来说，如何让终端用户在现存的Hadoop
- 【转载】Hadoop和大数据：60款顶级大数据开源工具
- Mysql分组统计、排序、取前N条记录解决方案