Hadoop集群启动常见异常
2016-03-15 21:34
218 查看
1、hadoop节点的本地工作目录访问异常(权限)
2、namenode处于安全模式,导致无法上传数据
namenode在刚刚启动的时候处于安全模式不一定是异常,但是如果启动完成之后一直不退出安全模式,就有问题,可以用以下指令尝试手动退出 hdfs namenode -safemode leave
如果退出不成功,可以查看日志信息或者关闭重启
3、start-dfs.sh后,直接上传文件,发现上传失败抛出异常
排查异常的步骤:
--应该用jps查看一下进程是否正常:namenode datanode secondarynamenode
如果相关进程不存在,查看相关进程的日志文件来分析错误
--如果进程都存在,还存在问题,有可能是进程间的集群协调有问题
hdfs dfsadmin -report 来查看集群的信息
--实在找不到线索,删除tmp目录,然后重新格式化,启动
2、namenode处于安全模式,导致无法上传数据
namenode在刚刚启动的时候处于安全模式不一定是异常,但是如果启动完成之后一直不退出安全模式,就有问题,可以用以下指令尝试手动退出 hdfs namenode -safemode leave
如果退出不成功,可以查看日志信息或者关闭重启
3、start-dfs.sh后,直接上传文件,发现上传失败抛出异常
排查异常的步骤:
--应该用jps查看一下进程是否正常:namenode datanode secondarynamenode
如果相关进程不存在,查看相关进程的日志文件来分析错误
--如果进程都存在,还存在问题,有可能是进程间的集群协调有问题
hdfs dfsadmin -report 来查看集群的信息
--实在找不到线索,删除tmp目录,然后重新格式化,启动
相关文章推荐
- linux第12天 线程
- Copy和MutableCopy
- linux 基础命令(1)
- centos7.0 安装LNMP运行环境
- Linux df命令用法
- 运行Hadoop的示例程序WordCount-Running Hadoop Example
- Android服务器——使用TomCat实现软件的版本检测,升级,以及下载更新进度!
- Android服务器——使用TomCat实现软件的版本检测,升级,以及下载更新进度!
- 实现Hadoop的Writable接口Implementing Writable interface of Hadoop
- Linux内核分析 读书笔记 (第一章、第二章)
- 更为详细的介绍Hadoop combiners-More about Hadoop combiners
- Hadoop Combiners
- Top N之MapReduce程序加强版Enhanced MapReduce for Top N items
- 浅谈WebLogic和Tomcat
- Top N的MapReduce程序MapReduce for Top N items
- IOS源码网站
- 腾讯云服务器php+mysq+nginx配置出现的问题及解决方法(亲测)
- 【BZOJ1826】【tyvj2644】缓存交换,贪心+堆维护
- 为Hadoop创建JAR包文件Creating a JAR for Hadoop
- Linux学习6之shell筛选当前目录下文件并逐个对其进行操作