(总结)Linux下使用rsync最快速删除海量文件的方法
2016-06-20 22:40
696 查看
昨天遇到了要在Linux下删除海量文件的情况,需要删除数十万个文件。这个是之前的程序写的日志,增长很快,而且没什么用。这个时候,我们常用的删除命令rm -fr * 就不好用了,因为要等待的时间太长。所以必须要采取一些非常手段。我们可以使用rsync来实现快速删除大量文件。
1、先安装rsync:
2、建立一个空的文件夹:
3、用rsync删除目标目录:
这样我们要删除的log目录就会被清空了,删除的速度会非常快。rsync实际上用的是替换原理,处理数十万个文件也是秒删。
选项说明:
–delete-before 接收者在传输之前进行删除操作
–progress 在传输时显示传输过程
-a 归档模式,表示以递归方式传输文件,并保持所有文件属性
-H 保持硬连接的文件
-v 详细输出模式
–stats 给出某些文件的传输状态
1、先安装rsync:
yum install rsync
2、建立一个空的文件夹:
mkdir /tmp/test
3、用rsync删除目标目录:
rsync --delete-before -a -H -v --progress --stats /tmp/test/ log/
这样我们要删除的log目录就会被清空了,删除的速度会非常快。rsync实际上用的是替换原理,处理数十万个文件也是秒删。
选项说明:
–delete-before 接收者在传输之前进行删除操作
–progress 在传输时显示传输过程
-a 归档模式,表示以递归方式传输文件,并保持所有文件属性
-H 保持硬连接的文件
-v 详细输出模式
–stats 给出某些文件的传输状态
相关文章推荐
- Linux:命令gedit
- 设备树(五)linux内核主线booting-without-of.txt
- 设备树(四)linux内核总线booting-without-of.txt
- 设备树(一)linux内核主线了解dts
- 第六章、Linux文件权限与目录配置
- 设备树(二)linux内核顶层am335x-evm.dts
- 设备树(三)linux内核主线次顶层common-335x-evm.dts
- linux遍历子进程浅析
- centos 温度监控软件
- linux学习心得
- linux,centos下解压tar,gz,bz2,tgz,zip等
- Linux和Windows下ActiveMQ下载、安装部署
- CentOS6.5编译python2.7.x PyPy 和numpy(PyPy)
- ArchLinux下十八岁的感悟
- Linux命令解析--ls
- 3、Linux档案与目录管理
- Linux中的IO复用接口简介(文件监视?)
- 手把手教你linux下配置vsftp服务器(以CentOS为例)--非常的详细
- 在centos6.x如何克隆虚拟机
- DNS原理入门 作者阮一峰 DNS 查询过程