美文网首页
Jenkins备份之大数据量备份

Jenkins备份之大数据量备份

作者: 羋学僧 | 来源:发表于2023-04-20 17:43 被阅读0次

    一、问题描述

    Jenkins的数据都在Jenkins_home下,但是此文件下还会存放构建记录、报告数据等数据,如果直接备份Jenkins_home,体积非常大。

    二、解决方案:

    使用rsyn的eclude参数来排除不想要的文件夹,同步文件到临时目录,然后使用tar打压缩包,移动到备份目录,接着删除临时目录的数据,后续维护备份目录,根据指定的备份数量,删除老的备份。
    整过程作为shell脚本,执行定时任务。
    #!/bin/bash
    dataPath="/data/jenkins_home"
    bakPath="/data/jenkins_bak"
    bakName=`date "+jenkins-bak-%Y%m%d-%H-%M"`
    tmpPath=$bakPath/$bakName
    # 复制jenkins数据目录到临时位置
    # cp -r /data/jenkins_home $tmpPath
    # 为了不保存builds记录,更换cp为rsync命令,排除某些文件夹
    rsync --delete -azp --exclude=builds --exclude=modules --exclude=nextBuildNumber  $dataPath $tmpPath
    # 压缩并保存
    tar zcPf $tmpPath".tar.gz" $tmpPath
    echo `date "+%Y%m%d-%H:%M:%S"`'save file :'$tmpPath'.tar.gz'
    # 删除临时文件
    rm -rf $tmpPath
    # 判断备份数量,大于指定个数,删除最老备份
    num=`ls $bakPath|wc -l`
    oldFile=`ls $bakPath|sort|head -1`
    [ $num -gt 7 ] && rm -f $bakPath/$oldFile && echo `date "+%Y%m%d-%H:%M:%S"`'too many files, rm file: '$oldFile
    

    使用crontab进行测试,每两分钟备份一次

    crontab -e
    
    */2 * * * sh /data/jenkins_backup.sh >> /data/backup.log
    
    service cron restart
    

    结果

    相关文章

      网友评论

          本文标题:Jenkins备份之大数据量备份

          本文链接:https://www.haomeiwen.com/subject/ikmljdtx.html