hdfs.DFSClient: DataStreamer Exception: org.apache.hadoop.ipc.RemoteException: java.io.IOException: 分类: hadoop 2015-03-21 10:56 57人阅读 评论(0) 收藏
2015-03-21 10:56
746 查看
情况:master(h21) JobTracker,SecondaryNameNode,NameNode都启动了。
slave(h22,h23)的TaskTracker,DataNode也都启动了。 但是在master(h21)机器上看,却没有可用的DateNode节点。 hdfs(put 命令)上传文件的时候也会报错
网上说清理data ,tmp文件夹,检查硬盘可用空间,重新格式化,以及退出safemode 都试过了。 错误还是没一点变化
拿着权威指南又看了一遍,发现是自己的core-site.xml配置错了。 我以为是每台机器都要配置自己的hostname. 原来是要all slaves都要配置master 的ip:port .. 解决了。。 下楼吃东西去
解决方案:core-site.xml里面配置master的ip和port
slave(h22,h23)的TaskTracker,DataNode也都启动了。 但是在master(h21)机器上看,却没有可用的DateNode节点。 hdfs(put 命令)上传文件的时候也会报错
网上说清理data ,tmp文件夹,检查硬盘可用空间,重新格式化,以及退出safemode 都试过了。 错误还是没一点变化
拿着权威指南又看了一遍,发现是自己的core-site.xml配置错了。 我以为是每台机器都要配置自己的hostname. 原来是要all slaves都要配置master 的ip:port .. 解决了。。 下楼吃东西去
解决方案:core-site.xml里面配置master的ip和port
相关文章推荐
- hdfs.DFSClient: DataStreamer Exception: org.apache.hadoop.ipc.RemoteException: java.io.IOException: 分类: hadoop 2015-03-21 10:56 56人阅读 评论(0) 收藏
- hdfs.DFSClient: DataStreamer Exception: org.apache.hadoop.ipc.RemoteException: java.io.IOException:
- 使用 hdfs dfs -put 报错 org.apache.hadoop.ipc.RemoteException(java.io.IOException): File /test/a.txt._C
- hive运行query语句时提示错误:org.apache.hadoop.ipc.RemoteException: java.io.IOException: java.io.IOException:
- hadoop hdfs 读写错误解决:java.io.IOException: Filesystem closed org.apache.hadoop.hdfs.DFSClient.checkOpe
- Hadoop2.2.0 中错误总结之(org.apache.hadoop.ipc.RemoteException(java.io.IOException): File /test._COPYING)
- org.apache.hadoop.ipc.RemoteException: java.io.IOException:XXXXXXXXXXX could only be replicated to 0 nodes, instead of 1
- hive执行query语句时提示错误:org.apache.hadoop.ipc.RemoteException: java.io.IOException: java.io.IOException:
- Hadoop异常 hdfs.DFSClient: DataStreamer Exception: org.apache.hadoop.ipc.RemoteException
- hadoop文件操作错误---org.apache.hadoop.ipc.RemoteException(java.io.IOException)
- hadoop上传文件错误org.apache.hadoop.ipc.RemoteException(java.io.IOException)
- 安装好hadoop集群后,报错如下n org.apache.hadoop.ipc.RemoteException(java.io.IOException): File /data/hadoop-roo
- Hadoop异常 hdfs.DFSClient: DataStreamer Exception: org.apache.hadoop.ipc.RemoteException
- 运行基准测试hadoop集群中的问题:org.apache.hadoop.ipc.RemoteException: java.io.IOException: File /benchmarks/TestDFSIO/io_data/test_
- org.apache.hadoop.ipc.RemoteException(java.io.IOException)
- Hadoop异常 hdfs.DFSClient: DataStreamer Exception: org.apache.hadoop.ipc.RemoteException
- org.apache.hadoop.ipc.RemoteException(java.io.IOException)
- hadoop配置新节点后,出现 org.apache.hadoop.hdfs.server.datanode.DataNode: java.io.IOException: Incompatible n
- org.apache.hadoop.hdfs.server.datanode.DataNode: java.io.IOException: Incompatible namespaceIDs
- org.apache.hadoop.hdfs.server.datanode.DataNode: Invalid dfs.datanode.data.dir /chunk : java.io.Fil