MepReduce面试题:我们在开发分布式计算 job 时,是否可以去掉 reduce()阶段?为什么?
2019-06-16 15:09
330 查看
可以,例如我们的集群就是为了存储文件而设计的,不涉及到数据的计算,就可以将mapReduce都省掉。去掉之后就不排序了,不进行shuffle操作了。
比如,流量运营项目中的行为轨迹增强功能部分。
相关文章推荐
- 我用asp NetBox 花生壳建的站 为什么在我们本地用户打开不了只有我自己可以打开 而我有几位好友 重庆 湖南的可以登录
- 分布式事务--我们是否真的需要
- 我很高兴找了一张可以说明:为什么软件开发那么困难的图
- Q:我已经使用WinDriver成功开发驱动程序,请问是否可以在设备管理器中修改此驱动程序显示的名称呢?
- Job的任务执行流程之Reduce阶段
- 为什么我们同时搞acm,结果是你就可以去final
- 为什么Hadoop将一定会是分布式计算的未来?
- 在软件开发的早期阶段为什么要进行可行性研究?应该从哪些方面研究目标系统的可行性?
- 我用asp NetBox 花生壳建的站 为什么在我们本地用户打开不了只有我自己可以打开 而我有几位好友 重庆 湖南的可以登录
- iOS开发 OC 判断NSString是否包含某个字符串 为什么?
- 分布式基础学习(2)分布式计算系统(Map/Reduce)
- Java中是否可以继承String类,为什么
- 【Jeff Vogel:为什么我们不再针对iPad开发了】
- Java中是否可以继承String类,为什么
- 分布式基础学习_分布式计算系统(Map/Reduce)
- 为什么我们同时搞acm,结果是你就可以去final
- 我们搞开发的为什么会感觉到累
- 为什么带约束条件的极值计算可以通过引入拉格朗日算子解决
- 我们搞开发的为什么会感觉到累(转)
- 我们为什么需要Map-Reduce?