您的位置:首页 > 大数据

大数据下 移动计算 和 移动数据的一点理解

2017-11-28 16:31 246 查看
移动计算就是把计算任务下发到数据所在的节点进行处理。

移动数据就是将数据移动到计算任务的节点,这样将损耗大量网络开销,导致流量激增,处理效率慢。

 

此外还要申明,在mapreduce程序中,其中map阶段是移动计算的,即本地计算,但是在reduce时,要进行shuffle进过网络传输。

更多详情:http://blog.csdn.net/king_a_123/article/details/53439801    

      http://blog.csdn.net/magicdreaming/article/details/7629002
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签:  大数据 数据
相关文章推荐