关于Subversion主从备份方式的调整(全量、增量脚本)更新

本文引用于http://blog.chinaunix.net/uid-25266990-id-3369172.html

之前对Subversion服务器作了迁移,关于SVN的架构也走了调整,有单一的服务器改为主从备份的方式。在“subversion迁移过程中增量备份脚本”中提到了增量备份的方式,但是运行一段时间,发现备份出错,提示导入的文件已存在,于是重新检查,修改了脚本。现在一直稳定运行着。

今天重新回顾,发现了之前文章很多错误的地方,对文章作了更新,附上Subsection 全量和增量备份脚本。
    
OS:RHEL 5.4
主:192.168.0.1
从:192.168.0.2
Subversion版本:svn, version 1.6.6 (r40053)
版本库:mysvn

全量备份:

说明:每周日备份,删除30天之前的备份文件。

  1. #!/bin/bash
  2. #function:SVN全量备份
  3. #Author: 志在千裏 2012-4-30
  4. svn_repos="/home/svn/mysvn" #版本库目录
  5. backup_dir="/home/svn/backup" #备份目录
  6. next_backup_file="week_incremental_backup".`date %Y%m%d`
  7. log="$backup_dir/week_backed_up.log" #日志文件
  8. echo "********************"`date`"***************">> $log
  9. echo "SVN ALL DUMP start!">> $log
  10. last_rev="`/usr/local/subversion/bin/svnlook youngest $svn_repos`" #最新版本
  11. if [ -f $next_backup_file ];then
  12. echo "No new revisions to backup."
  13. exit 0
  14. else
  15. /usr/local/subversion/bin/svnadmin dump --incremental --revision 0:$last_rev $svn_repos > $backup_dir/$next_backup_file #0版本,到最新版本的全量备份
  16. fi
  17. echo "Last:$last_rev">> $log #记录版本库最新版本
  18. #删除30天之前的备份数据
  19. find $backup_dir -type f -mtime +30  -exec rm -rf {} \; | tee -a $log
  20. echo "********************"`date`"***************">>$log

那么如何还原呢?

  1. /usr/local/subversion/bin/svnadmin load /home/svn/mysvn 备份文件

增量备份:

较昨天记录最后版本,导出新增的版本,使用load 将每日增量备份导入备份服务器。

说明:nfs降远程文件系统挂载到主服务器,方便本地备份和传输

1、主服务器增量备份时间要比从服务器增量导入时间较前,保证增量备份已完成。

2、备份起点在上一次备份最新版本+1个后开始备份,删除前一天的增量备份文件。

备份:

  1. #!/bin/bash
  2. #function:SVN增量备份
  3. #Author: 志在千裏 2012-4-30
  4. svn_repos="/home/svn/mysvn"  #版本库
  5. backup_dir="/mnt/svnaddevreyday" #nfs挂载从服务器192.168.0.2的目录
  6. next_backup_file="add_incremental_backup".`date %Y%m%d`  #增量备份文件
  7. log="$backup_dir/last_add_backed_up.log"   #日志文件
  8. repo="$backup_dir/svn.txt"   #记录版本库最新版本
  9. echo "********************"`date`"***************">> $log
  10. echo "SVN ADD DUMP start!">> $log
  11. first_rev="`cat $repo`"  #备份起点
  12. last_rev="`/usr/local/subversion/bin/svnlook youngest $svn_repos`" #注服务器版本库最新版本
  13. slave_rev="`cat $backup_dir/slave.txt`"  #从服务器提供的校验版本

    if [ $first_rev  -ne $slave_rev ];then

  14. echo "SVN Slaves is error, please check. " | mail -s "SVN slave is ERROR! first_rev !== slave_rev"   [email protected]    #主服务器备份起点版本和从数据最后版本不一致,则邮件报警

    else

  15. /usr/local/subversion/bin/svnadmin dump --incremental --revision $first_rev:$last_rev $svn_repos > $backup_dir/$next_backup_file  #上一次记录的版本,到最新版本的增量备份
  16. fi
  17. echo "Fist:$first_rev">> $log
  18. echo "Last:$last_rev">> $log #写入日志文件
  19. dump_rev=$(($last_rev 1)) #下一次备份起点,重点 +1版本,否则报错
  20. echo "$dump_rev">$repo  #覆盖上一次备份起点
  21. #删除之前的增量备份文件
  22. rm -rf $backup_dir/add_incremental_backup.$(date %Y%m%d --date=‘1 days ago‘)

从服务:

导入增量数据:

  1. #!/bin/bash
  2. #function:SVN增量导入
  3. #Author: 志在千裏 2012-4-30
  4. svn_repos="/home/svn/mysvn" #从服务器192.168.0.2版本库目录
  5. backup_dir="/home/svn/svnaddevreyday" #nfs远程共享主服务器192.168.0.1目录
  6. log="$backup_dir/last_load.log" #日志文件
  7. echo "********************"`date`"***************">> $log
  8. echo "SVN load start!">> $log
  9. first_rev="`/usr/local/subversion/bin/svnlook youngest $svn_repos`"
  10. echo "First:$first_rev">> $log
  11. /usr/local/subversion/bin/svnadmin load $svn_repos </home/svn/svnaddevreyday/add_incremental_backup.* 2>&1 >>$log #导入增量备份文件
  12. last_rev="`/usr/local/subversion/bin/svnlook youngest $svn_repos`"
  13. echo "Last:$last_rev">> $log #记录最新版本号
  14. repo_slave=$(($last_rev+1)) #作为检测主服务器和从服务器数据是否同步的判断数据
  15. echo "$repo_slave">/home/svn/svnaddevreyday/slave.txt
  16. echo "********************"`date`"***************">>$log
  17. #删除增量备份文件
  18. rm -rf /home/svn/svnaddevreyday/add_incremental_backup.*
  19. echo "SVN load Eed!">> $log
时间: 2024-10-22 07:46:35

关于Subversion主从备份方式的调整(全量、增量脚本)更新的相关文章

Mysql备份系列(4)--lvm-snapshot备份mysql数据(全量+增量)操作记录

Mysql最常用的三种备份工具分别是mysqldump.Xtrabackup(innobackupex工具).lvm-snapshot快照.前面分别介绍了:Mysql备份系列(1)--备份方案总结性梳理Mysql备份系列(2)--mysqldump备份(全量+增量)方案操作记录Mysql备份系列(3)--innobackupex备份mysql大数据(全量+增量)操作记录 废话不多说,下面即是使用lvm-snapshot快照方式备份mysql的操作记录,仅依据本人实验中使用而述. 操作记录:如下环

Mysql备份系列(2)--mysqldump备份(全量+增量)方案操作记录

在日常运维工作中,对mysql数据库的备份是万分重要的,以防在数据库表丢失或损坏情况出现,可以及时恢复数据. 线上数据库备份场景:每周日执行一次全量备份,然后每天下午1点执行MySQLdump增量备份. 下面对这种备份方案详细说明下:1.MySQLdump增量备份配置执行增量备份的前提条件是MySQL打开binlog日志功能,在my.cnf中加入log-bin=/opt/Data/MySQL-bin"log-bin="后的字符串为日志记载目录,一般建议放在不同于MySQL数据目录的磁盘

使用mysqldump进行全量+增量备份方案操作记录

在日常运维工作中,对mysql数据库的备份是万分重要的,以防在数据库表丢失或损坏情况出现,可以及时恢复数据. 线上数据库备份场景:每周日执行一次全量备份,然后每天下午1点执行MySQLdump增量备份. 下面对这种备份方案详细说明下:1.MySQLdump增量备份配置执行增量备份的前提条件是MySQL打开binlog日志功能,在my.cnf中加入log-bin=/opt/Data/MySQL-bin"log-bin="后的字符串为日志记载目录,一般建议放在不同于MySQL数据目录的磁盘

Mysql使用innobackupex在线备份方案(全量+增量)操作记录

在日常的linux运维工作中,对mysql数据库的备份是非常重要的一个环节.关于mysql的备份和恢复,比较传统的是用mysqldump工具.今天这里介绍下另一款mysql备份工具innobackupex,利用它对mysql做全量和增量备份,仅仅依据本人实战操作做一记录,如有误述,敬请指出~ 一.innobackupex的介绍Xtrabackup是由percona开发的一个开源软件,是使用perl语言完成的脚本工具,能够非常快速地备份与恢复mysql数据库,且支持在线热备份(备份时不影响数据读写

Xtrabackup 备份大数据库(全量备份和增量备份)

Xtrabackup Xtrabackup是由percona开源的免费数据库热备份软件,它能对InnoDB数据库和XtraDB存储引擎的数据库非阻塞地备份(对于MyISAM的备份同样需要加表锁): mysqldump备份方式是采用的逻辑备份,其最大的缺陷是备份和恢复速度较慢,如果数据库大于50G,mysqldump备份就不太适合. Xtrabackup优点 1)备份速度快,物理备份可靠 2)备份过程不会打断正在执行的事务(无需锁表) 3)能够基于压缩等功能节约磁盘空间和流量 4)自动备份校验 5

mysqldump全量+增量备份

mysqldump全量备份 每周执行 mysqldump -uroot -p --flush-logs --single-transaction --all-database >/home/1.sql 增量备份 当需要增量备份的时候 mysql>flush logs mysql>show master status; 如显示mysql-bin.000005 备份mysql-bin.000004即可 还原时,先还原全量备份然后还原增量,还原时关闭mysql-bin日志, mysql>

Mysl全量+增量自动备份脚本

1.编写全量备份脚本 代码如下: # vim /root/DBFullyBak.sh //添加以下内容 #!/bin/bash # Program #    use mysqldump to Fully backup mysql data per week! # History #    2015.08.25 # Path #    .... BakDir=/home/mysql/backup LogFile=/home/mysql/backup/bak.log Date=`date +%Y%m

10.Solr4.10.3数据导入(DIH全量增量同步Mysql数据)

转载请出自出处:http://www.cnblogs.com/hd3013779515/ 1.创建MySQL数据 create database solr; use solr; DROP TABLE IF EXISTS student; CREATE TABLE student ( id char(10) NOT NULL, stu_name varchar(50) DEFAULT NULL, stu_sex int(1) DEFAULT NULL, stu_address varchar(20

MySQL数据库之Percona全量增量备份与恢复

一.概述: mysqldump是由MySQL-Commiunity提供的MySQL数据库备份的工具,但是只能用于全量备份,如果要实现增量备份需要基于binlog日志实现. 本文介绍使用第三方软件Percona提供的命令innobackupex做全量备份.增量备份以及恢复的方法.percona-xtrabackup主要是有两个工具,其中一个是xtrabackup,专门用于备份InnoDB表,另一个是innobackupex,是前者封装后的一个perl脚本,同时支持备份InnoDB和MyISAM.在