hbase集群部分节点HRegionServer启动后自动关闭的问题
2017-04-30 16:47
399 查看
我有四个HRegionServer节点。发现输入./start-hbase.sh后,只启动了两个节点,而且后来两个节点又挂掉了。
查看日志:
more hbase-root-regionserver-heres01.log
报错如下:
网上查找到原因:系统时间不同步的。
1)在hbase-site.xml文件中
修改增加 ,将时间改大点
<property>
<name>hbase.master.maxclockskew</name>
<value>150000</value>
</property>
2)修改系统时间,将时间改为一致(建议采用本方法):
修改日期
date -s 11/23/2013
修改时间
date -s 15:14:00
检查硬件(CMOS)时间
clock -r
这个修改在系统重启后就失效了,因此为了将这个时间永久生效,需要将修改的时间写入CMOS。
clock -w
3)修改完成后单独启动HRegionServer节点即可:
启动集群中所有的regionserver
./hbase-daemons.sh start regionserver
启动某个regionserver
./hbase-daemon.sh start regionserver
如果想通过游览器游览:http://192.168.2.110:60010,需要重新停启hbase。
查看日志:
more hbase-root-regionserver-heres01.log
报错如下:
2017-04-30 14:02:05,999 FATAL [regionserver60020] regionserver.HRegionServer: Master rejected startup because clock is out of sync org.apache.hadoop.hbase.ClockOutOfSyncException: org.apache.hadoop.hbase.ClockOutOfSyncException: Server heres01,60020,1493532120370 has been rejected; Reported time i s too far out of sync with master. Time difference of 2421573ms > max allowed of 30000ms at org.apache.hadoop.hbase.master.ServerManager.checkClockSkew(ServerManager.java:314) at org.apache.hadoop.hbase.master.ServerManager.regionServerStartup(ServerManager.java:215) at org.apache.hadoop.hbase.master.HMaster.regionServerStartup(HMaster.java:1292) at org.apache.hadoop.hbase.protobuf.generated.RegionServerStatusProtos$RegionServerStatusService$2.callBlockingMethod(RegionServerStatusProtos.java:5085) at org.apache.hadoop.hbase.ipc.RpcServer.call(RpcServer.java:2185) at org.apache.hadoop.hbase.ipc.RpcServer$Handler.run(RpcServer.java:1889) at sun.reflect.NativeConstructorAccessorImpl.newInstance0(Native Method) at sun.reflect.NativeConstructorAccessorImpl.newInstance(NativeConstructorAccessorImpl.java:57) at sun.reflect.DelegatingConstructorAccessorImpl.newInstance(DelegatingConstructorAccessorImpl.java:45) at java.lang.reflect.Constructor.newInstance(Constructor.java:526) at org.apache.hadoop.ipc.RemoteException.instantiateException(RemoteException.java:106) at org.apache.hadoop.ipc.RemoteException.unwrapRemoteException(RemoteException.java:95) at org.apache.hadoop.hbase.protobuf.ProtobufUtil.getRemoteException(ProtobufUtil.java:277) at org.apache.hadoop.hbase.regionserver.HRegionServer.reportForDuty(HRegionServer.java:1955) at org.apache.hadoop.hbase.regionserver.HRegionServer.run(HRegionServer.java:794) at java.lang.Thread.run(Thread.java:745) Caused by: org.apache.hadoop.hbase.ipc.RemoteWithExtrasException(org.apache.hadoop.hbase.ClockOutOfSyncException): org.apache.hadoop.hbase.ClockOutOfSyncException: Ser ver heres01,60020,1493532120370 has been rejected; Reported time is too far out of sync with master. Time difference of 2421573ms > max allowed of 30000ms at org.apache.hadoop.hbase.master.ServerManager.checkClockSkew(ServerManager.java:314) at org.apache.hadoop.hbase.master.ServerManager.regionServerStartup(ServerManager.java:215) at org.apache.hadoop.hbase.master.HMaster.regionServerStartup(HMaster.java:1292) at org.apache.hadoop.hbase.protobuf.generated.RegionServerStatusProtos$RegionServerStatusService$2.callBlockingMethod(RegionServerStatusProtos.java:5085) at org.apache.hadoop.hbase.ipc.RpcServer.call(RpcServer.java:2185) at org.apache.hadoop.hbase.ipc.RpcServer$Handler.run(RpcServer.java:1889) at org.apache.hadoop.hbase.ipc.RpcClient.call(RpcClient.java:1454) at org.apache.hadoop.hbase.ipc.RpcClient.callBlockingMethod(RpcClient.java:1658) at org.apache.hadoop.hbase.ipc.RpcClient$BlockingRpcChannelImplementation.callBlockingMethod(RpcClient.java:1716) at org.apache.hadoop.hbase.protobuf.generated.RegionServerStatusProtos$RegionServerStatusService$BlockingStub.regionServerStartup(RegionServerStatusProtos.java :5402) at org.apache.hadoop.hbase.regionserver.HRegionServer.reportForDuty(HRegionServer.java:1953) ... 2 more
网上查找到原因:系统时间不同步的。
1)在hbase-site.xml文件中
修改增加 ,将时间改大点
<property>
<name>hbase.master.maxclockskew</name>
<value>150000</value>
</property>
2)修改系统时间,将时间改为一致(建议采用本方法):
修改日期
date -s 11/23/2013
修改时间
date -s 15:14:00
检查硬件(CMOS)时间
clock -r
这个修改在系统重启后就失效了,因此为了将这个时间永久生效,需要将修改的时间写入CMOS。
clock -w
3)修改完成后单独启动HRegionServer节点即可:
启动集群中所有的regionserver
./hbase-daemons.sh start regionserver
启动某个regionserver
./hbase-daemon.sh start regionserver
如果想通过游览器游览:http://192.168.2.110:60010,需要重新停启hbase。
相关文章推荐
- hbase集群部分节点HRegionServer启动后自动关闭的问题
- hbase环境搭建,启动之后HMaster挂掉,或者是集群里,只启动了HMaster节点,HRegionServer节点没有启动的问题
- Hbase HRegionServer启动后自动关闭
- Hbase HRegionServer启动后自动关闭
- Hbase HRegionServer启动后自动关闭
- HRegionServer启动后自动关闭的问题
- Hbase HRegionServer启动后自动关闭
- 分布式集群HBase启动后某节点的HRegionServer自动消失问题
- 解决hadoop集群中datanode启动后自动关闭的问题
- hadoop2集群中的datanode启动以后自动关闭的问题
- hbase无法启动Regionserver:ClassNotFoundException: org.apache.hadoop.util.PlatformName问题解决
- 解决hadoop集群中datanode启动后自动关闭的问题
- HBASE-1.1.12集群启动之后Hmaster,HregionServer进程会很快死掉问题
- ElasticSearch集群未连接 无法发现节点(windows环境)以及windows环境下设置服务 不能自动启动的问题
- 解决hadoop集群中datanode启动后自动关闭的问题
- 重启集群的时候发现HBase的HRegionServer 服务启动失败
- HBase的子节点的RegionServer无法启动
- hadoop运行故障问题解决1——datanode节点启动后自动关闭
- HBase启动后RegionServer自动挂原因及解决办法【ntp】
- hbase无法启动Regionserver:Failed construction of Regionserver: class org.apache.hadoop.hbase.regions问题解决