您的位置:首页 > 运维架构

unbuntu虚拟机下hadoop实例wordcount的运行

2015-09-24 10:36 405 查看
1.查看hadoop进程启动情况:jps。正常情况下应该有NameNode、SecondaryNameNode、DataNode、JobTracker、TaskTracker

2.查看集群状态:bin/hadoop
dfsadmin  -report;

3.在/usr/local/hadoop/hadoop-0.20.2创建目录test,在test下创建文本file01、file02,分别输入数个单词;

4.在hdfs分布式文件系统创建目录input:bin/hadoop
fs -mkdir input;之后可以使用bin/hadoop fs -ls查看;

ps:删除目录:bin/hadoop fs -rmr ***;删除文件:bin/hadoop fs -rm ***;

5.离开hodoop的安全模式:bin/hadoop dfsadmin -safemode leave;

6.将文本文件放入hdfs分布式文件系统中:bin/hadoop
fs -put
/usr/local/hadoop/hadoop-0.20.2/test/* input;

7.执行例子中的WordCount:bin/hadoop
jar hadoop-0.20.2-examples.jar wordcount input output;

8.查看执行结果:bin/hadoop
dfs -cat output/*;

9.关闭hadoop所有进程:bin/stop-all.sh;
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: