Hadoop集群上检查磁盘使用量和清理相关日志文件脚本
2015-04-06 12:03
573 查看
#####----检查Hadoop集群上的磁盘使用量----#####
#!/bin/sh
#检查Hadoop集群上的磁盘使用量
function diskState(){
COUNT=1
while [ ${COUNT} -le ${NUM} ]
do
echo "********检查Hadoop${COUNT}上的磁盘使用量**********"
#获取远程机器上的磁盘状态
ssh -t -p 22 hadoop${COUNT} "df -h"
COUNT=$((${COUNT}+1))
done
}
NUM=$1 #hadoop 集群的数量
echo "Hadoop集群数量${NUM}"
if [ "${NUM}" -le "0" ] ;then
echo "警告:$0 num "
else
diskState
echo "********======磁盘检查结束======***********"
fi
#########——删除Hadoop集群的日志文件和/tmp下的文件——#########
#!/bin/sh
#删除文件的方法
function deleteFile(){
COUNT=1
while [ ${COUNT} -le ${NUM} ]
do
echo "********删除Hadoop${COUNT}上的临时文件和日志记录**********"
#获取远程机器上的磁盘状态
ssh -t -p 22 hadoop${COUNT} "rm -rf /usr/local/hadoop/tmp/*;rm -rf /tmp/*"
#ssh -t -p 22 hadoop${COUNT} "rm -rf /tmp/*"
COUNT=$((${COUNT}+1))
done
}
DEL=$1
NUM=3
if [ "${DEL}" -gt "0" ] ;then
deleteFile
echo "********======删除临时文件结束======***********"
elif test !${DEL};then
echo "警告:$0 num 1 #删除临时文件\n"
fi
#!/bin/sh
#检查Hadoop集群上的磁盘使用量
function diskState(){
COUNT=1
while [ ${COUNT} -le ${NUM} ]
do
echo "********检查Hadoop${COUNT}上的磁盘使用量**********"
#获取远程机器上的磁盘状态
ssh -t -p 22 hadoop${COUNT} "df -h"
COUNT=$((${COUNT}+1))
done
}
NUM=$1 #hadoop 集群的数量
echo "Hadoop集群数量${NUM}"
if [ "${NUM}" -le "0" ] ;then
echo "警告:$0 num "
else
diskState
echo "********======磁盘检查结束======***********"
fi
#########——删除Hadoop集群的日志文件和/tmp下的文件——#########
#!/bin/sh
#删除文件的方法
function deleteFile(){
COUNT=1
while [ ${COUNT} -le ${NUM} ]
do
echo "********删除Hadoop${COUNT}上的临时文件和日志记录**********"
#获取远程机器上的磁盘状态
ssh -t -p 22 hadoop${COUNT} "rm -rf /usr/local/hadoop/tmp/*;rm -rf /tmp/*"
#ssh -t -p 22 hadoop${COUNT} "rm -rf /tmp/*"
COUNT=$((${COUNT}+1))
done
}
DEL=$1
NUM=3
if [ "${DEL}" -gt "0" ] ;then
deleteFile
echo "********======删除临时文件结束======***********"
elif test !${DEL};then
echo "警告:$0 num 1 #删除临时文件\n"
fi
相关文章推荐
- 使用shell脚本自动检查hdfs集群各数据节点的磁盘空间使用率[附代码]
- 检查存储结构-控制、REDO日志、表空间使用情况、数据文件等信息脚本--HTML
- SQL脚本:监控当前重做日志文件使用情况
- 使用logrotate 管理日志文件 (Linux相关)
- 数据库管理——Powershell——使用Powershell脚本找出消耗最多磁盘空间的文件
- 使用RMAN和控制文件备份删除归档日志的SHELL脚本--RED HAT 5 LINUX 64
- 使用作业自动清理数据库日志文件
- 使用RMAN和控制文件备份删除归档日志的SHELL脚本--RED HAT 5 LINUX 64
- 检查REDO日志相关信息并生成HTML文件的脚本
- 使用RMAN和控制文件备份删除归档日志的SHELL脚本--RED HAT 5 LINUX 64
- 使用作业自动清理数据库日志文件
- 使用diagcollection.pl脚本打包收集诊断日志文件
- linux shell脚本定时清理tomcat日志文件(初稿)
- 清理脚本滑动窗口方式清理日志文件
- Linux 查看磁盘分区、文件系统、磁盘的使用情况相关的命令和工具介绍
- 数据库管理——Powershell——使用Powershell脚本找出消耗最多磁盘空间的文件
- 解决MongoDB 日志文件过大,清理后还占用很大磁盘空间的问题
- 配置文件、虚拟机-如何使用vagrant在虚拟机安装hadoop集群-by小雨
- 实战:mysql检查物理磁盘中的二进制日志文件是否有丢失
- hadoop集群空间使用情况报告脚本