您的位置:首页 > 运维架构

Hadoop随感

2016-02-01 12:19 253 查看
这几天感冒生病,终于有点起色了,就来这里看看,没想到发生了翻天覆地的变化,我热衷于学习的Hadoop,我来了。

学了这么长时间的Hadoop,就说下我的感受吧。

说起Hadoop,就的从我女朋友说起了。

一天公司下班,坐在回家的公交车上,我女朋友就给我打电话了:我从网上看到了一个光宇大数据的职位,薪水特别高,你要不要学学大数据方面的东西啊。我说好啊,这是个不错的选择。

接下来的几天,我就从网上查找各种相关的资料,电子书,论坛,帖子,视频等等的一系列,但是找到的对于我这个还没入门的草鸟来说,有用的寥寥无几,尤其是视频,要不就是生涩难懂,要不就是需要加Q,收费给播放码,这是个头疼的事,我就想着,没挣到一分钱就又要为了学习视频来花钱,真是够了,我女朋友也为了这事数落了我好几天,大体数落的啥,我就不说了。

往后几天,找到了几本电子书慢慢研究,看了几页,我的头快炸了,这是什么东东,这是适合草鸟级的我学习的书吗?我的回答是否定的。

想了几天,我说想要学习Hadoop,必须先要搭起环境才能逐步研究啊,就从网上找啊找啊,经过了一天的摸索,终于在自己的机器上搭起的环境,但是紧接着问题来了,这需要的是Linux系统才能运行,接下来几天我又狂敲命令,加上在工作中使用到的一些常用命令,学习起来压力并不是那么大。

在学习Hadoop的过程中,当我运行第一个hallo word级别的程序时,那个兴奋劲,就不在这里溢于言表了,回家和我女朋友唠叨了几个小时,我女朋友说我还没长大^v^

回忆下搭环境的过程:装虚拟机(VMWare 或者 Oracle VM VirtualBox)我用的前者------配置网络------装Linux(Centos 或者 Ubuntu)我也用的前者------虚拟机系统和windows系统ping通------下载并安装jdk------配置环境变量------配置SSH免密码登录------下载Hadoop并解压------单机模式(直接解压,只配置hadoop-env.sh中的jdk目录)------配置各种文件(包括xml
sh文件)伪分布式------运行wordcount实例------在windows下打开浏览器查看运行的各种状态。

当我慢慢研究Hadoop的启动过程或者停止过程期间,分析了Hadoop的一些内部执行的流程,这让我在之后的学习中打下了一定的基础。

之后的几天就是在网上查找一些和Hadoop相关的帖子,论坛,帮助我学习。

总体来说,工作之余我也是充实的,没有因为闲而闲,也没有因为忙而忙,如果之后的某一年能从事相关的工作,从事我喜爱的工作,对于我来说是一件可望而可能可即的,为了家庭,为了我所爱的人,也要奋斗出一片天,能装下我所企及的天。
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: