unbuntu虚拟机下hadoop实例wordcount的运行
2015-09-24 10:36
405 查看
1.查看hadoop进程启动情况:jps。正常情况下应该有NameNode、SecondaryNameNode、DataNode、JobTracker、TaskTracker
2.查看集群状态:bin/hadoop
dfsadmin -report;
3.在/usr/local/hadoop/hadoop-0.20.2创建目录test,在test下创建文本file01、file02,分别输入数个单词;
4.在hdfs分布式文件系统创建目录input:bin/hadoop
fs -mkdir input;之后可以使用bin/hadoop fs -ls查看;
ps:删除目录:bin/hadoop fs -rmr ***;删除文件:bin/hadoop fs -rm ***;
5.离开hodoop的安全模式:bin/hadoop dfsadmin -safemode leave;
6.将文本文件放入hdfs分布式文件系统中:bin/hadoop
fs -put
/usr/local/hadoop/hadoop-0.20.2/test/* input;
7.执行例子中的WordCount:bin/hadoop
jar hadoop-0.20.2-examples.jar wordcount input output;
8.查看执行结果:bin/hadoop
dfs -cat output/*;
9.关闭hadoop所有进程:bin/stop-all.sh;
2.查看集群状态:bin/hadoop
dfsadmin -report;
3.在/usr/local/hadoop/hadoop-0.20.2创建目录test,在test下创建文本file01、file02,分别输入数个单词;
4.在hdfs分布式文件系统创建目录input:bin/hadoop
fs -mkdir input;之后可以使用bin/hadoop fs -ls查看;
ps:删除目录:bin/hadoop fs -rmr ***;删除文件:bin/hadoop fs -rm ***;
5.离开hodoop的安全模式:bin/hadoop dfsadmin -safemode leave;
6.将文本文件放入hdfs分布式文件系统中:bin/hadoop
fs -put
/usr/local/hadoop/hadoop-0.20.2/test/* input;
7.执行例子中的WordCount:bin/hadoop
jar hadoop-0.20.2-examples.jar wordcount input output;
8.查看执行结果:bin/hadoop
dfs -cat output/*;
9.关闭hadoop所有进程:bin/stop-all.sh;
相关文章推荐
- 技术博客与网站地址
- nginx双向认证客户端配置
- hadoop MapReduce实例解析
- linux环境变量/etc/profile文件修改错误
- Struts2配置 ClassNotFoundException: rg.apache.struts2.dispatcher.ng.filter.StrutsPrepareAndExecuteFilt
- Zabbix WMI 监控
- C程序员学bash shell容易掉坑的注意点(未完待续)
- shell tee
- nginx搭建过程
- 9月22日全球域名商(国际域名)解析量排行榜TOP20
- hadoop环境的搭建(2.7.1版本)
- nginx 转帖
- Linux 变量结构体等命名规则
- 文章发布系统-系统架构设计
- Linux中的查找命令find
- Linux中的查找命令find
- Linux内核编码风格
- .wang域名总量TOP14:均为中国域名商 排名不变
- Linux守护进程log——syslog
- CentOS 6.5下Redmine的安装配置