您的位置:首页 > 运维架构

第128讲:Hadoop集群管理工具dfsadmin实战详解学习笔记

2015-11-15 15:22 706 查看
第128讲:Hadoop集群管理工具dfsadmin实战详解学习笔记

通过dfsadmin可以查看hdfs的一些信息也可以执行一些管理操作。

要想使用dfsadmin需要有管理员权限,因为dfsadmin可以修改hdfs的内容。

使用hadoop dfsadmin命令可以显示帮助 。

hadoop dfsadmin -report 统计信息,可以查看 datanode的IP,心跳信息等。

hadoop dfsadmin

DEPRECATED: Use of this script to execute hdfs command is deprecated.

Instead usr the hdfs command for it.

Usage: hdfs dfsadmin

Note:Administrative commands can only be run as the HDFS superuser.

[-report [-live] [-dead] [-decommissioning]]

[-safemode <enter | leave | get | wait>]

[saveNodespace]

[roolEdits]

[restoreFailedStorage true | false|check]

[-refreshNodes]

[-setQuota <quota> <dirname>...<dirname>]

[-clrQuota <dirname>...<dirname>]

[finalizeUpgrade]

[rollingUpgrade [<query|prepare|finalize>]]

[-refreshServiceAcl]

[refreshUserToGroupMappings]

[-refreshSuperUserGroupsConfiguration]

[-refreshCallQueue]

[-refresh <host: ipc_port> <key> <arg1..argn>]

[-reconfig <dataname|...> <host: ipc_port> <start|status>]

[printTopology]

[-refreshNamenodes datanode_host: ipc_port]

[-deleteBlickpool datanode_host: ipc_port blockpoolId[force]]

[-setBalancerBandwidth <bandwidth in bytes per sencond>]

[-fetchImage <local directory>]

[-allowSnapshot <snapshotDir>]

[-disallowSnashot <snapshotDir>]

[shutdownDatanode <datanode_host: ipc_port> [upgrade]]

[getDatanodeInfo <datanode_host: ipc_port>]

[-metasave filename]

[-setStoragePolicy path policyName]

[-getStoragePolicy path]

[-help [cmd]]

hadoop dfsadmin -saveNamespace 将内存中的文件系统映像保存到一个新的fsimage,重置edits文件。

hadoop dfsadmin -refreshNodes 更新datanodes列表。有些节点不存在了就需要用refreshNodes来更新。

以上内容是王家林老师DT大数据梦工厂《Hadoop深入浅出实战经典》第128讲的学习笔记。

王家林:Spark、Flink、Docker、Android技术中国区布道师。Spark亚太研究院院长和首席专家,DT大数据梦工厂创始人,Android软硬整合源码级专家,英语发音魔术师,健身狂热爱好者。

微信公众账号:DT_Spark

联系邮箱18610086859@126.com

电话:18610086859

QQ:1740415547

微信号:18610086859

新浪微博:ilovepains

王家林的第一个中国梦:免费为全社会培养100万名优秀的大数据从业人员!

可以通过王家林老师的微信号18610086859发红包捐助,目前已经发布的王家林免费视频全集如下:

1,《大数据不眠夜:Spark内核天机解密(共100讲)》:http://pan.baidu.com/s/1eQsHZAq

2,《Hadoop深入浅出实战经典》 http://pan.baidu.com/s/1mgpfRPu

3,《Spark纯实战公益大讲坛》 http://pan.baidu.com/s/1jGpNGwu

4,《Scala深入浅出实战经典》 http://pan.baidu.com/s/1sjDWG25

5,《Docker公益大讲坛》 http://pan.baidu.com/s/1kTpL8UF

6,《Spark亚太研究院Spark公益大讲堂》 http://pan.baidu.com/s/1i30Ewsd

7,Spark实战高手之路全部六阶段视频:http://edu.51cto.com/pack/view/id-144.html

8,《大数据Spark企业级实战》购买http://item.jd.com/11622851.html

第128讲视频网站地址:

51CTO

http://edu.51cto.com/lesson/id-78169.html
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: