rsync快速删除大量小文件

作者: 生信编程日常 | 来源:发表于2020-03-22 17:12 被阅读0次

    有时候一个文件中有几十万个甚至更多子文件的情况下,就算这个文件不大,可能只有几G的情况下,用rm -rf 仍然很慢,需要等很久,而且占用大量的系统资源。一个比较快速的方法是用rsync同步。

    首先创建一个空文件夹:

    mkdir blank/
    

    然后将需要删除的文件夹与空文件夹同步:

    rsync --delete-before -a -H blank/ del_data/
    

    这里加上"/"速度比不加要快。

    --delete-before 指的是在传输之前就进行删除操作。
    -a 以递归方式传输文件,保持所有文件属性。

    运行完之后,需要删除的文件夹被清空,如果再想删除文件夹,直接rm -r就可以了。 实测比rm -rf快非常多。

    欢迎关注!


    生信编程日常

    相关文章

      网友评论

        本文标题:rsync快速删除大量小文件

        本文链接:https://www.haomeiwen.com/subject/hkyvyhtx.html