hadoop fs 常用命令
查询hdfs系统的目录结构:
hadoop fs -ls /test/gonganbu/scene_analysis_suggestion/*
随机返回指定行数的样本数据
hadoop fs -cat /test/gonganbu/scene_analysis_suggestion/* | shuf -n 5
返回前几行的样本数据
hadoop fs -cat /test/gonganbu/scene_analysis_suggestion/* | head -100
返回最后几行的样本数据
hadoop fs -cat /test/gonganbu/scene_analysis_suggestion/* | tail -5
查看文本行数
hadoop fs -cat hdfs://172.16.0.226:8020/test/sys_dict/sysdict_case_type.csv |wc -l
查看文件大小(单位byte)
hadoop fs -du hdfs://172.16.0.226:8020/test/sys_dict/* 返回文件大小(单位为byte)
hadoop fs -du -h /t_user/my_hive_db/my_hive_table_test01 返回文件大小(单位为可为K\M\G反正保留一位小数)
在这里插入图片描述
hadoop fs -du /test 统计test目录下各文件大小
在这里插入图片描述
hadoop fs -du -s /test 统计test目录下所有文件大小
在这里插入图片描述
hadoop fs -count hdfs://172.16.0.226:8020/test/sys_dict/* 统计文件行数
————————————————
版权声明:本文为CSDN博主「mona.jiang」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。
原文链接:https://blog.csdn.net/qq_35347718/article/details/106736246
- hadoop fs常用操作命令
- hadoop fs 常用命令记录
- hadoop fs 运维常用的几个命令
- Hadoop fs常用命令
- 关于centos环境下Flume+hadoop+hive常用命令
- HADOOP常用命令
- hadoop常用命令
- 【原创】Hadoop 常用命令集锦
- hadoop伪分布式常用命令
- hadoop hdfs常用命令
- hadoop常用命令
- CentOS7.1 KVM虚拟化之libguestfs-tools工具常用命令介绍(7)
- Hadoop 文件操作常用的命令
- Hadoop常用命令
- 何时使用hadoop fs、hadoop dfs与hdfs dfs命令
- 【Hadoop基础】hadoop fs 命令
- Hadoop fs 命令使用手册
- Hadoop:hadoop fs、hadoop dfs与hdfs dfs命令的区别
- hadoop 常用命令
- hadoop常用命令