小白学习大数据之路——Hadoop3.0.0-alpha2 安装以及测试程序wordcount实践
2017-02-19 00:00
781 查看
好久没看大数据,最近发现用的软件都太旧了,所以准备更行所有大数据相关的新用法。
第一步:下载hadoop3.0.0-alpha2
我就给个网站吧,怎么下载(http://http://mirrors.cnnic.cn/apache/hadoop/common/hadoop-3.0.0-alpha2/)你懂得。
第二步:解压并将文件移动到相应位置
第三步:配置参数
这里因为是新版本,所以文件路径有变化,我可是费好大力气找到的。相当于旧版本的conf文件
第四步:那就是jwordcount程序了
最后一步:计数,看图吧
第一步:下载hadoop3.0.0-alpha2
我就给个网站吧,怎么下载(http://http://mirrors.cnnic.cn/apache/hadoop/common/hadoop-3.0.0-alpha2/)你懂得。
第二步:解压并将文件移动到相应位置
tar -zxvf hadoop-3.0.0-alpha2.tar.gz mv hadoop-3.0.0-alpha2 /usr/local/hadoop
第三步:配置参数
这里因为是新版本,所以文件路径有变化,我可是费好大力气找到的。相当于旧版本的conf文件
vi etc/hadoop/gadoop-env.sh //进入文件后修改 export JAVA_HOME=***** //你安装的Java路径 source hadoop-env.sh //使修改文件生效
第四步:那就是jwordcount程序了
hadoop -version //看看是否安装成功 mkdir input //在Hadoop文件夹下新建文件夹input cp etc/hadoop/* input ls input
最后一步:计数,看图吧
bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.0.0-alpha1.jar grep input output 'dfs[a-z.]+'
相关文章推荐
- 大数据之Hadoop平台(二)Centos6.5(64bit)Hadoop2.5.1伪分布式安装记录,wordcount运行测试
- 【hadoop学习】在伪分布式hadoop上实践word count程序——c/c++ pipes版本
- 【hadoop学习】在伪分布式hadoop上实践word count程序——c/c++ streaming版本(未完)
- 一步一步跟我学习hadoop(2)----hadoop eclipse插件安装和运行wordcount程序
- 【hadoop学习】在伪分布式hadoop上手把手实践word count程序【上】
- 大数据之Hadoop平台(二)Centos6.5(64bit)Hadoop2.5.1伪分布式安装记录,wordcount运行测试
- 【hadoop学习】在伪分布式hadoop上手把手实践word count程序【下】
- 【Hadoop】MAC下hadoop2.6安装以及执行wordcount
- Hadoop学习笔记---1.wordcount程序的剖析
- hadoop学习之WordCount程序升级版
- hadoop学习-wordcount程序c++重写执行
- Hadoop2.4.1中wordcount示例程序测试过程
- 教为学:Python学习之路(二):MySQLdb的几种安装方式,以及用Python测试连接MySql
- hadoop-0.23.9安装以及第一个mapreduce测试程序
- Hadoop入门实践之从WordCount程序说起
- win7下安装hadoop 2.6.0 的eclipse插件并编写运行WordCount程序
- Hadoop提供了最简单的Map/Reduce编程实例WordCount,本文对该Demo的程序结构,以及Map/Reduce框架的注意事项,进行了分析。
- hadoop学习笔记(三)mapreduce程序wordcount
- Hadoop入门实践之从WordCount程序说起
- hadoop-0.23.9安装以及第一个mapreduce测试程序