系统重启后,需要重新格式化HDFS问题解决方案
2014-12-22 09:37
295 查看
每次系统(ubuntu12.04)进行重启后,发现之前HDFS的格式化都失效了。
启动hadoop,
执行 ps -ef | grep hadoop
就会发现 namenode节点没有起来
我使用伪分布配置启动。执行如下命令,查看默认的8020端口也没有起来
观察hadoop namenode -format的启动日志,发现了如下日志:
也就是说namenode节点的存储路径是默认路径
默认路径在系统进行重启后会被清理,所有之前的格式化就失效了。
解决方案:
在core-site.xml增加临时目录配置
关闭hadoop ,重新执行hadoop namenode -format
出现如下日志就表明OK了:
启动hadoop,
执行 ps -ef | grep hadoop
就会发现 namenode节点没有起来
我使用伪分布配置启动。执行如下命令,查看默认的8020端口也没有起来
netstat -nap|grep 8020 或者 lsof -i:8020
观察hadoop namenode -format的启动日志,发现了如下日志:
14/12/22 09:11:47 INFO common.Storage: Storage directory /tmp/hadoop-root/dfs/name has been successfully formatted.
也就是说namenode节点的存储路径是默认路径
默认路径在系统进行重启后会被清理,所有之前的格式化就失效了。
解决方案:
在core-site.xml增加临时目录配置
<property> <name>hadoop.tmp.dir</name> <value>/home/hadoop/tmp</value> <description>A base for other temporary directories.</description> </property>
关闭hadoop ,重新执行hadoop namenode -format
出现如下日志就表明OK了:
14/12/22 09:19:22 INFO common.Storage: Storage directory /home/hadoop/tmp/dfs/name has been successfully formatted.
相关文章推荐
- Ubuntu设置静态IP,解决重启后需要重新设置的问题
- Ubuntu设置静态IP,解决重启后需要重新设置的问题。
- 怎样解决手机提示SD卡已损坏,可能需要重新格式化卡的问题
- hadoop重启虚机后hdfs中数据丢失,需要重新格式化问题
- Ubuntu设置静态IP,解决重启后需要重新设置的问题。
- Ubuntu设置静态IP,解决重启后需要重新设置的问题
- 系统错误 无法启动此程序,因为计算机中丢失MFC42D.DLL。尝试重新安装该程序以解决此问题
- IM系统用户离线上线问题解决方案
- 一插上u盘提示需要格式化,选择格式化时提示u盘被写保护无法进行格式化的问题解决方法
- 一些系统相关问题解决方案
- 解决“使用驱动器*:中的光盘之前需要将其格式化”的问题
- linux 系统重新安装,但需要保存系统内数据的问题
- [原创]对于“优盘变成了RAW的文件系统,双击提示需要格式化,右键查看属性是0字节,也无法打开”的解决办法
- ubuntu opera问题解决--E: 软件包 opera 需要重新安装,但是我无法找到相应的安装文件。
- dll重新编译问题解决方案
- 解决“使用驱动器F中的光盘前需要将其格式化 双击后提示:文件目录损坏且无法读取”问题
- 解决系统重启后samba无法共享的问题
- 郁闷的两天(Windows系统两个问题解决方案汇总)
- Microsoft_Office_Word_遇到问题需要关闭。我们对此引起的不便表示抱歉,问题解决方案
- “SD卡已损坏。可能需要重新格式化卡” 解决办法!