学习hadoop学什么?
2016-08-30 20:13
176 查看
转载网址:http://www.bi168.cn/thread-12847-1-1.html
大数据依然是火的不要不要的,作为大数据基础的hadoop自然也会备受重视,那么Hadoop的使用场景有哪些?小编给大家介绍下。
1,大数据量存储:分布式存储
2,日志处理:Hadoop擅长这个
3,海量计算:并行计算
4,ETL:数据抽取到Oracle、mysql、DB2、mongdb及主流数据库
5,使用HBase做数据分析:用扩展性应对大量的写操作—Facebook构建了基于HBase的实时数据分析系统
6,机器学习:比如Apache Mahout项目
7,搜索引擎:hadoop + lucene实现
8,数据挖掘:目前比较流行的广告推荐,9,用户细分特征建模
10,个性化广告推荐,
11,智能仪器推荐
捎带,小编向大家介绍Hadoop学习方面的一些事项。希望对新手学习Hadoop有所帮助。
学习hadoop学什么?
主要学习hadoop的核心组件:hdfs、mapreduce、yarn。它们是hadoop最最核心的部分。在它们的基础上,我们还可以选择性的学习hadoop生态圈中的日志收集工具flume、数据仓库hive、分布式数据库hbase、数据导入导出工具sqoop。
学习hadoop需要什么基础?
hadoop需要具备javaSE的基础知识,对于javaEE(jsp/servlet/三大框架)没有要求。需要熟练使用linux系统。大体上,有这些预备知识就够了。也有人说,只需要具备javaSE知识就足够了。
学完hadoop会影响javaEE工作吗?
严格的讲,hadoop与javaEE是两个不同的发展思路,hadoop倾向于底层数据处理部分,javaEE负责系统开发,二者前后相继,没有交叉,相辅相成。
学习hadoop对算法和数据结构要求高吗?
一般海量数据的处理都是自定义存储结构,实现自己的算法,这是业界的通用处理思路。这对普通程序员而言要求还是很高的。hadoop的优点就是进行了封装,写的算法都是偏向于业务的,不需要创造算法。因此大可放心。但是,如果工作的公司不使用hadoop去处理大数据,这时候对算法和数据结构的要求就高了。
- 本文出自BI168大数据社区,更多精彩请点击 原文地址:http://www.bi168.cn/>>http://www.bi168.cn/thread-12847-1-1.html
大数据依然是火的不要不要的,作为大数据基础的hadoop自然也会备受重视,那么Hadoop的使用场景有哪些?小编给大家介绍下。
1,大数据量存储:分布式存储
2,日志处理:Hadoop擅长这个
3,海量计算:并行计算
4,ETL:数据抽取到Oracle、mysql、DB2、mongdb及主流数据库
5,使用HBase做数据分析:用扩展性应对大量的写操作—Facebook构建了基于HBase的实时数据分析系统
6,机器学习:比如Apache Mahout项目
7,搜索引擎:hadoop + lucene实现
8,数据挖掘:目前比较流行的广告推荐,9,用户细分特征建模
10,个性化广告推荐,
11,智能仪器推荐
捎带,小编向大家介绍Hadoop学习方面的一些事项。希望对新手学习Hadoop有所帮助。
学习hadoop学什么?
主要学习hadoop的核心组件:hdfs、mapreduce、yarn。它们是hadoop最最核心的部分。在它们的基础上,我们还可以选择性的学习hadoop生态圈中的日志收集工具flume、数据仓库hive、分布式数据库hbase、数据导入导出工具sqoop。
学习hadoop需要什么基础?
hadoop需要具备javaSE的基础知识,对于javaEE(jsp/servlet/三大框架)没有要求。需要熟练使用linux系统。大体上,有这些预备知识就够了。也有人说,只需要具备javaSE知识就足够了。
学完hadoop会影响javaEE工作吗?
严格的讲,hadoop与javaEE是两个不同的发展思路,hadoop倾向于底层数据处理部分,javaEE负责系统开发,二者前后相继,没有交叉,相辅相成。
学习hadoop对算法和数据结构要求高吗?
一般海量数据的处理都是自定义存储结构,实现自己的算法,这是业界的通用处理思路。这对普通程序员而言要求还是很高的。hadoop的优点就是进行了封装,写的算法都是偏向于业务的,不需要创造算法。因此大可放心。但是,如果工作的公司不使用hadoop去处理大数据,这时候对算法和数据结构的要求就高了。
- 本文出自BI168大数据社区,更多精彩请点击 原文地址:http://www.bi168.cn/>>http://www.bi168.cn/thread-12847-1-1.html
相关文章推荐
- Java零基础,学习hadoop:为什么要编译Java源代码,编译后会有什么效果
- 查看jar里面到底什么鬼~(hadoop学习wordcount程序代码查看)
- 学习笔记 Hadoop是什么?
- 什么是Hadoop,怎样学习Hadoop
- 什么是HADOOP、产生背景、在大数据、云计算中的位置和关系、国内外HADOOP应用案例介绍、就业方向、生态圈以及各组成部分的简介(学习资料中的文档材料)
- (5)hadoop学习——hive是什么?
- hadoop主要学什么?hadoop学习总结
- 学习笔记 Hadoop是什么?
- hadoop学习(一)——hadoop是什么
- 学习Hadoop,需要什么基础?
- 学习hadoop大数据基础框架需要什么基础
- 什么是Hadoop,怎样学习Hadoop
- 什么是Hadoop,怎样学习Hadoop
- 学习hadoop需要Java什么基础
- 什么是Hadoop,怎样学习Hadoop?
- 学习hadoop大数据基础框架需要什么基础
- Hive简介、什么是Hive、为什么使用Hive、Hive的特点、Hive架构图、Hive基本组成、Hive与Hadoop的关系、Hive与传统数据库对比、Hive数据存储(来自学习资料)
- [全程建模]三个问题的对话之三——学习的态度是什么?
- .NET和J2EE该相互学习什么 (转贴)
- 上周技术关注:.NET和J2EE该相互学习什么