使用history命令查看作业的整体执行情况
2016-04-10 13:37
148 查看
1)通过使用history命令,我们可以深入到一个Job的任务级层面查看执行最快的任务,以及执行最慢的任务,以及其他的有用信息。命令如下:
“/ouptut”就是要查询的job的输出路径,如果输出路径位于hdfs的根目录下,有时候会忘记添加“/”,也就是使用如下命令:
就会出现如下提示:
![](https://images2015.cnblogs.com/blog/760432/201604/760432-20160410131604172-2032560641.png)
就是因为没有提高正确的路径,所以找不到文件,触发了IO异常。
2)当我们使用了history命令,得到关于job的关键信息如下:
![](https://images2015.cnblogs.com/blog/760432/201604/760432-20160410133526890-1149392592.png)
![](https://images2015.cnblogs.com/blog/760432/201604/760432-20160410133537922-720611933.png)
![](https://images2015.cnblogs.com/blog/760432/201604/760432-20160410133546031-1221627726.png)
![](https://images2015.cnblogs.com/blog/760432/201604/760432-20160410133553578-1758682470.png)
![](https://images2015.cnblogs.com/blog/760432/201604/760432-20160410133608468-1777094026.png)
hadoop job -history /output
“/ouptut”就是要查询的job的输出路径,如果输出路径位于hdfs的根目录下,有时候会忘记添加“/”,也就是使用如下命令:
hadoop job -history output
就会出现如下提示:
![](https://images2015.cnblogs.com/blog/760432/201604/760432-20160410131604172-2032560641.png)
就是因为没有提高正确的路径,所以找不到文件,触发了IO异常。
2)当我们使用了history命令,得到关于job的关键信息如下:
![](https://images2015.cnblogs.com/blog/760432/201604/760432-20160410133526890-1149392592.png)
![](https://images2015.cnblogs.com/blog/760432/201604/760432-20160410133537922-720611933.png)
![](https://images2015.cnblogs.com/blog/760432/201604/760432-20160410133546031-1221627726.png)
![](https://images2015.cnblogs.com/blog/760432/201604/760432-20160410133553578-1758682470.png)
![](https://images2015.cnblogs.com/blog/760432/201604/760432-20160410133608468-1777094026.png)
相关文章推荐
- 寻找直方图中最大矩形
- Java - JSON
- 邁向IT專家成功之路的三十則鐵律 鐵律七:IT人效率之道-時間管理
- 有干货--魅族技术沙龙第三期广州站参会总结
- 两个比较接口Comparable与Comparator
- 【小镇的技术天梯】lanmp服务器集群搭建(4)mysql-cluster集群搭建
- PL/SQL Developer 中文乱码问题的解决
- 《转》handler机制的原理
- gcc -I -L -l区别
- Object-C 介绍
- 自己定义AlertDialog对话框布局
- 图片识别
- JDBC处理事务
- windows多线程没那么难
- 桌面快捷方式图标显示异常
- PHP-FPM配置及使用总结
- 视频编解码学习之一:理论基础
- CSS3---box-shadow设置
- ABP源码分析二十七:ABP.Entity Framework
- c++文件读取最后一行读取两次的问题