Ubuntu快速删除大量小文件方法

本文主要是介绍Ubuntu快速删除大量小文件方法，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！

进行以下两步操作即可：

1、第一步：创建空的文件夹： mkdir /tmp/blank

2、第二步：执行以下命令：rsync --delete-before -d /tmp/blank/ /home/stormnode/store/html/new/

也可以使用并行rm命令删除

parallel rm -rf dir/{} ::: `ls -f dir/`

Linux 快速删除大量小文件方法

---

当我们在linux系统中要删除数万或者数十万甚至数百万的文件时使用rm -rf *就不太好用，因为要等待很长一段时间。在这种情况之下我们可以使用linux系统命令rsync来巧妙的处理。rsync实际上用的是替换原理，处理数十万个文件也是秒删。

1.rsync安装，有些系统默认安装有该命令

ubuntu系统：sudo apt-get install rsync

fedora 系统：sudo yum install rsync

其他的可以源码安装，到下面的网站下载http://rsync.samba.org

 2. rsync提供了一些跟删除有关的参数

rsync --help | grep delete

--del an alias for --delete-during

--delete delete extraneous files from destination dirs

--delete-before receiver deletes before transfer,not during

--delete-during receiver deletes during transfer (default)

--delete-delay find deletions during,delete after

--delete-after receiver deletes after transfer,not during

--delete-excluded also delete excluded files from destination dirs

--ignore-errors delete even if there are I/O errors

--max-delete=NUM don't delete more than NUM files

其中--delete-before接收者在传输之前进行删除操作

3. 示例

清空目录或 文件，如下：

1、先建立 一个空目录

mkdir /data/blank

2、用rsync 删除目标目录

rsync --delete-before -d-a -H -v --progress --stats/data/blank/ /var/edatacache/

或者

rsync --delete-before -d /data/blank/ /var/edatacache/

这样/var/edatacache目录就被快速的清空了。

选项说明： 
–delete-before 接收者在传输之前进行删除操作 
–progress 在传输时显示传输过程 
-a 归档模式，表示以递归方式传输文件，并保持所有文件属性 
-H 保持硬连接的文件 
-v 详细输出模式 
–stats 给出某些文件的传输状态

-d transfer directories without recursing

3、也可以用来 删除大 文件

假如我们在/root/下有 一个几十G甚至上百G的 文件data，现在我们要 删除它

一、创建 一个空 文件

touch /root/empty

二、用rsync清空/root/data 文件

rsync--delete-before -d --progess --stats /root/empty /root/data

注意：

当SRC和DEST 文件性质不一致时将会报错

当SRC和DEST性质都为 文件【f】时，意思是清空 文件 内容而不是 删除 文件

当SRC和DEST性质都为目录【d】时，意思是 删除该目录下的所有 文件，使其变为空目录

总结

以上是编程之家为你收集整理的Ubuntu快速删除大量小文件方法全部内容，希望文章能够帮你解决Ubuntu快速删除大量小文件方法所遇到的程序开发问题。

 

这篇关于Ubuntu快速删除大量小文件方法的文章就介绍到这儿，希望我们推荐的文章对编程师们有所帮助！

---