您的位置:首页 > 其它

MapReduce几个简单的例子

2016-08-12 16:27 92 查看
文件合并和去重:

  可以把每一行文本作为key,value为随意值。

数字排序:

  MapReduce过程中就有排序,它是按照key值进行排序的,如果key为封装int的IntWritable类型,那么MapReduce按照数字大小对key排序,如果key为封装为String的Text类型,那么MapReduce按照字典顺序对字符串排序。

IntWritable和Text作为输入输出的键值对类型,都可以通过set()设置值。
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: