rsync快速删除大量小文件

作者: 生信编程日常 | 来源:发表于2020-03-22 17:12 被阅读0次

有时候一个文件中有几十万个甚至更多子文件的情况下,就算这个文件不大,可能只有几G的情况下,用rm -rf 仍然很慢,需要等很久,而且占用大量的系统资源。一个比较快速的方法是用rsync同步。

首先创建一个空文件夹:

mkdir blank/

然后将需要删除的文件夹与空文件夹同步:

rsync --delete-before -a -H blank/ del_data/

这里加上"/"速度比不加要快。

--delete-before 指的是在传输之前就进行删除操作。
-a 以递归方式传输文件,保持所有文件属性。

运行完之后,需要删除的文件夹被清空,如果再想删除文件夹,直接rm -r就可以了。 实测比rm -rf快非常多。

欢迎关注!


生信编程日常

相关文章

网友评论

    本文标题:rsync快速删除大量小文件

    本文链接:https://www.haomeiwen.com/subject/hkyvyhtx.html