您的位置:首页 > 职场人生

MepReduce面试题:我们在开发分布式计算 job 时,是否可以去掉 reduce()阶段?为什么?

2019-06-16 15:09 330 查看

可以,例如我们的集群就是为了存储文件而设计的,不涉及到数据的计算,就可以将mapReduce都省掉。去掉之后就不排序了,不进行shuffle操作了。

比如,流量运营项目中的行为轨迹增强功能部分。

内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: