美文网首页
Linux - 多线程压缩日志

Linux - 多线程压缩日志

作者: 大猪大猪 | 来源:发表于2019-07-09 16:25 被阅读0次

    这里有17个G的日志文件,使用多线程压缩2分23秒即可压缩完成3.2G的压缩,6倍的压缩比,普通压缩则要使用7分50秒,整整多出了3倍,我们看看是怎么使用的。

    使用方法

    安装pigz

    yum install pigz -y
    # 或者
    apt-get install pigz
    

    压缩(使用8个CPU)

    time tar -cf - logdir | pigz -p 8 > logdir.tgz
    

    解压缩

    time pigz -p 8 -d logdir.tgz
    

    速度是非常之快的,大家可以自行测试。


    相关文章

      网友评论

          本文标题:Linux - 多线程压缩日志

          本文链接:https://www.haomeiwen.com/subject/mpxfkctx.html