您的位置:首页 > 大数据

大数据计算引擎发展的四个阶段

2020-01-15 06:38 706 查看

根据一些公开资料整理,也许有失偏颇,仅供参考:

 

1.第一代

Hadoop 承载的 MapReduce

2.第二代

支持 DAG(有向无环图) 的框架: Tez 、 Oozie,主要还是批处理任务

3.第三代

Job 内部的 DAG(有向无环图) 支持(不跨越 Job),以及强调的实时计算:Spark

4.第四代

对流计算的支持,以及更一步的实时性:Flink

 

SparkStreaming VS Flink Streaming

 

转载于:https://www.cnblogs.com/liugh/p/7823480.html

  • 点赞
  • 收藏
  • 分享
  • 文章举报
an7800666 发布了0 篇原创文章 · 获赞 1 · 访问量 2012 私信 关注
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: