Linux 快速删除大量小文件方法

当我们在linux系统中要删除数万或者数十万甚至数百万的文件时使用rm -rf *就不太好用,因为要等待很长一段时间。在这种情况之下我们可以使用linux系统命令rsync来巧妙的处理。rsync实际上用的是替换原理,处理数十万个文件也是秒删。

1. rsync安装,有些系统默认安装有该命令Ubuntu系统:sudo apt-get install rsyncFedora 系统:sudo yum install rsync其他的可以源码安装,到下面的网站下载

2. rsync提供了一些跟删除有关的参数

rsync –help | grep delete –del an alias for –delete-during –delete delete extraneous files from destination dirs –delete-before receiver deletes before transfer, not during –delete-during receiver deletes during transfer (default) –delete-delay find deletions during, delete after –delete-after receiver deletes after transfer, not during –delete-excluded also delete excluded files from destination dirs –ignore-errors delete even if there are I/O errors –max-delete=NUM don’t delete more than NUM files其中–delete-before接收者在传输之前进行删除操作

3. 示例 清空目录或文件,,如下: 1、先建立一个空目录

mkdir /data/blank 2、用rsync删除目标目录

rsync –delete-before -d -a -H -v –progress –stats /data/blank/ /var/edatacache/或者rsync –delete-before -d /data/blank/ /var/edatacache/

这样/var/edatacache目录就被快速的清空了。

选项说明:–delete-before 接收者在传输之前进行删除操作–progress 在传输时显示传输过程-a 归档模式,表示以递归方式传输文件,并保持所有文件属性-H 保持硬连接的文件-v 详细输出模式–stats 给出某些文件的传输状态-d transfer directories without recursing

3、也可以用来删除大文件假如我们在/root/下有一个几十G甚至上百G的文件data,现在我们要删除它一、创建一个空文件 touch /root/empty二、用rsync清空/root/data文件 rsync –delete-before -d –progess –stats /root/empty /root/data

注意:当SRC和DEST文件性质不一致时将会报错 当SRC和DEST性质都为文件【f】时,意思是清空文件内容而不是删除文件 当SRC和DEST性质都为目录【d】时,意思是删除该目录下的所有文件,使其变为空目录

我是在旅行吗?也许是的。

Linux 快速删除大量小文件方法

相关文章:

你感兴趣的文章:

标签云: