hadoop启动 运行 异常 错误汇总
2014-05-10 19:44
225 查看
1、ssh无密码通信建立,ssh localhost 不许要输入密码 但start-all时需要输入密码
这里在运行 sudo bin/start-all.sh时,ssh是需要输入密码才能启动各个节点的。
而运行cd bin, 直接 运行 ./start-all.sh时 就不需要密码了,并且 用jps也能看到相应的进程启动起来了。
2、找不到hadoop命令
source一下 hadoop-env.sh 可能在用户切换中导致环境变量丢失等情况。
3、Call to localhost/127.0.0.1:9001 failed on connection exception: java.net.ConnectException: 拒绝连接
重新hadoop namnode -format 格式化一下hadoop,然后重新 start-all就行了。
4、关于格式化hadoop的注意事项,hadoop namenode -format
在执行hadoop namenode -format时,一定要先把相关记录文件删除干净,一般来说有要把hadoop.tmp.dir 、 dfs.name.dir、dfs.data.dir相关文件里面的内容全部删除,并且保证目录的所有者和相应权限。(是root还是hadoop),把这些工作做完后再执行 格式化操作。
这步操作可以排除大量不知名错误。
这里在运行 sudo bin/start-all.sh时,ssh是需要输入密码才能启动各个节点的。
而运行cd bin, 直接 运行 ./start-all.sh时 就不需要密码了,并且 用jps也能看到相应的进程启动起来了。
2、找不到hadoop命令
source一下 hadoop-env.sh 可能在用户切换中导致环境变量丢失等情况。
3、Call to localhost/127.0.0.1:9001 failed on connection exception: java.net.ConnectException: 拒绝连接
重新hadoop namnode -format 格式化一下hadoop,然后重新 start-all就行了。
4、关于格式化hadoop的注意事项,hadoop namenode -format
在执行hadoop namenode -format时,一定要先把相关记录文件删除干净,一般来说有要把hadoop.tmp.dir 、 dfs.name.dir、dfs.data.dir相关文件里面的内容全部删除,并且保证目录的所有者和相应权限。(是root还是hadoop),把这些工作做完后再执行 格式化操作。
这步操作可以排除大量不知名错误。
相关文章推荐
- Hadoop 启动错误汇总:
- hadoop数据节点通信异常【启动hadoop集群遇到错误org.apache.hadoop.ipc.Client: Retrying connect to server】
- Hadoop运行错误及解决方法--namenode不启动(能力工场--小马哥整理)
- Hadoop运行错误及解决方法--namenode不启动(能力工场--小马哥整理)
- 异常解决:Hadoop启动出现ssh无法解析主机名等错误提示
- 在wind7中运行启动hadoop出现错误 java.lang.UnsatisfiedLinkError
- C程序访问hadoop出现的各种编译错误和运行时各种类DefFound异常的解决方法
- C程序访问hadoop出现的各种编译错误和运行时各种类DefFound异常的解决方法(makefile的书写和环境变量的配置)
- hadoop-0.20.2 & hbase-0.90.1 集群启动错误“org.apache.hadoop.ipc.RPC$VersionMismatch: Protocol org.apache.hadoop.hdfs.protocol.ClientP
- 汇总运行在Hadoop YARN上的开源系统
- 在电脑上找到这个路径:D:\jakarta-tomcat-6\conf\Catalina,将localhost目录直接删除掉,再一运行,就没事了! 因为配置文件中配置了启动程序,而webapps文件夹下却没有此应用程序,所以出现了上述错误。
- shiro项目启动报cache无效的配置异常错误
- eclipse运行hadoop1版本错误如下 ClassNotFoundException:org.apache.hadoop.io.nativeio.NativeIO$POSIX$Stat
- 058:对于可恢复的条件使用被检查的异常,对于程序错误使用运行时异常
- C访问hadoop程序终端显示运行正确,因为连接参数错误,使得通过网页查看就是没有成功原因分析和解决方案
- 2009-12-15 我的异常网-异常错误汇总
- 启动tomcat时 错误: 代理抛出异常 : java.rmi.server.ExportException: Port already in use: 1099的解决办法
- 如果遇到Hadoop集群正常,MapReduce作业运行出现错误,如何来查看作业运行日志(图文详解)
- hadoop启动和运行中的error总结和处理方法
- 运行hadoop程序时,有时候会报以下错误: org.apache.hadoop.dfs.SafeModeException: Cannot delete /user/hadoop/input. N