使用innobackupex备份mysql数据库

1  因为使用perl脚本编写,安装前应先安装

yum install perl-Time-HiRes -y

yum -y install perl-DBD-MySQL.x86_64

一起安装    yum -y install perl perl-devel libaio libaio-devel perl-Time-HiRes perl-DBD-MySQL

2  安装最新版,使用rpm -ivh 命令

tar包下载地址

http://www.percona.com/downloads/XtraBackup/Percona-XtraBackup-2.2.10/binary/redhat/6/x86_64/Percona-XtraBackup-2.2.10-re623acb-el6-x86_64-bundle.tar

rpm -ivh percona-xtrabackup-2.2.10-1.el6.x86_64.rpm

3  测试安装是否成功

yum list | grep percona

4  多实例备份

通常一般都直接使用innobackupex,因为它能同时备份InnoDB和MyISAM引擎的表。要注意的是my.cnf里datadir

这一点很重要,在多实例中最好的解决方式为复制my.cnf到/backup/config文件夹下,配置--defaults-file=/back/config/my.cnf(3306.cnf)

这个参数是必须要指定的,xtrabackup_55是根据它去定位innodb数据文件的位置

4.1  创建备份目录

 

# mkdir -p /backup/{config,full,incremental}

config:    存放my.cnf    可以直接将文件复制到config目录下

cp /etc/my.cnf  /backup/config/3306.cnf

full:    全备份目录

incremental:    增量备份目录

备份参数详解:

1

innobackupex

[--sleep=MS] [--compress[=LEVEL]] [--include=REGEXP] [--user=NAME]

[--password=WORD] [--port=PORT] [--socket=SOCKET] [--no-timestamp]

[--ibbackup=IBBACKUP-BINARY] [--slave-info] [--stream=tar]

[--defaults-file=MY.CNF] [--databases=LIST] [--remote-host=HOSTNAME]

BACKUP-ROOT-DIR

2

回滚未提交的事务,先执行此句再恢复数据

innobackupex

--apply-log [--use-memory=MB] [--uncompress]

[--defaults-file=MY.CNF] [--ibbackup=IBBACKUP-BINARY]

BACKUP-DIR

3

innobackupex --copy-back [--defaults-file=MY.CNF] BACKUP-DIR

各参数说明:

--defaults-file

同xtrabackup的--defaults-file参数

--apply-log

对xtrabackup的--prepare参数的封装

--copy-back

做数据恢复时将备份数据文件拷贝到MySQL服务器的datadir ;

--remote-host=HOSTNAME

通过ssh将备份数据存储到进程服务器上;

--stream=[tar]

备份文件输出格式, tar时使用tar4ibd , 该文件可在XtarBackup binary文件中获得.如果备份时有指定--stream=tar, 则tar4ibd文件所处目录一定要在$PATH中(因为使用的是tar4ibd去压缩, 在XtraBackup的binary包中可获得该文件)。

在使用参数stream=tar备份的时候,你的xtrabackup_logfile可能会临时放在/tmp目录下,如果你备份的时候并发写入较大的话xtrabackup_logfile可能会很大(5G+),很可能会撑满你的/tmp目录,可以通过参数--tmpdir指定目录来解决这个问题。

--tmpdir=DIRECTORY

当有指定--remote-host or --stream时, 事务日志临时存储的目录, 默认采用MySQL配置文件中所指定的临时目录tmpdir

--redo-only --apply-log组,

强制备份日志时只redo ,跳过rollback。这在做增量备份时非常必要。

--use-memory=#

该参数在prepare的时候使用,控制prepare时innodb实例使用的内存量

--throttle=IOS

同xtrabackup的--throttle参数

--sleep=是给ibbackup使用的,指定每备份1M数据,过程停止拷贝多少毫秒,也是为了在备份时尽量减小对正常业务的影响,具体可以查看ibbackup的手册 ;

--compress[=LEVEL]

对备份数据迚行压缩,仅支持ibbackup,xtrabackup还没有实现;

--include=REGEXP

对xtrabackup参数--tables的封装,也支持ibbackup。备份包含的库表,例如:--include="test.*",意思是要备份test库中所有的表。如果需要全备份,则省略这个参数;如果需要备份test库下的2个表:test1和test2,则写成:--include="test.test1|test.test2"。也可以使用通配符,如:--include="test.test*"。

--databases=LIST

列出需要备份的databases,如果没有指定该参数,所有包含MyISAM和InnoDB表的database都会被备份;

--uncompress

解压备份的数据文件,支持ibbackup,xtrabackup还没有实现该功能;

--slave-info,

备份从库, 加上--slave-info备份目录下会多生成一个xtrabackup_slave_info 文件, 这里会保存主日志文件以及偏移, 文件内容类似于:CHANGE MASTER TO MASTER_LOG_FILE=‘‘, MASTER_LOG_POS=0

--socket=SOCKET

指定mysql.sock所在位置,以便备份进程登录mysql.

4.2  全量备份

方式1普通方式

#innobackupex --defaults-file=/backup/config/3306.cnf --no-lock --user=harri --password

--socket=/var/lib/mysql/mysql_3306.sock /backup/full/

注 --no-lock为备份中不锁表

此时表明成功

 

方式2备份并打包压缩

innobackupex --user=harri --password --defaults-file=/backup/config/3306.cnf  --socket=/var/lib/mysql/mysql_3306.sock --stream=tar /backup/full/  2>/backup/full/eg.log | gzip     1>/backup/full/eg.tar.gz

说明:

--database=单独对zztx数据库做备份 ,若是不添加此参数那就那就是对全库做备份

2>/backup/full/eg.log  输出信息写入日志中

1>/backup/full/eg.tar.gz 打包压缩存储到该文件中

这种备份时间会比较长,主要是执行压缩操作。这种方式打的包需要使用tar izxvf解压。参数-i是必须加上的。

此处可以写个脚本做备份(backup.sh)

#!/bin/sh

echo "开始备份..."`date`

log=zztx01_`date +%y%m%d%H%M`.log

str=zztx01_`date +%y%m%d%H%M`.tar.gz

innobackupex --user=root --password=123456 --defaults-file=/etc/my.cnf --database=zztx --stream=tar /data/back_data/ 2>/data/back_data/$log | gzip 1>/data/back_data/$str

echo "备份完毕..."`date`

方式3(未测试)

备份到远程服务器

innobackupex  --database="testinnodb test"  --user=root --defaults-file=/data0/mysql/my.cnf  --no-lock --stream=tar /data0/backup/mysql/|ssh [email protected]  cat ">"/data0/backup.tar

 

 

4.3  备份恢复

 

1 关闭mysql服务

2 解压 tar -izxvf zztx.tar.gz -C /backup/full/  需要mkdir 文件夹

3

innobackupex  --defaults-file=/backup/config/3306.cnf --socket=/var/lib/mysql/mysql_3306.sock --apply-log --no-lock /backup/full/(--apply-log选项的命令是准备在一个备份上启动mysql服务)

(此步骤为恢复前的准备)

 

 innobackupex  --defaults-file=/backup/config/3306.cnf --socket=/var/lib/mysql/mysql_3306.sock --copy-back --no-lock /backup/full/  (--copy-back 选项的命令从备份目录拷贝数据,索引,日志到my.cnf文   件里规定的初始位置。)

4.chown -R mysql.mysql data (此步骤一定要有)

5重启数据库,完成恢复

 

 

多实例注意事项 : 对于my.cnf   [mysqld]结点下配置datadir路径,根据恢复的实例不同,此处的路径应该做相应的修改。

 

 

增量备份

(增量备份的前提是有一个全量备份,在全量备份的基础上进行增量备份)

第一次增量备份

innobackupex  --defaults-file=/backup/config/3306.cnf --socket=/var/lib/mysql/mysql_3306.sock 

 --no-lock --incremental /backup/incremental/ --incremental-basedir=/backup/full/

 

第二次增量备份

#innobackupex  --defaults-file=/backup/config/3306.cnf --socket=/var/lib/mysql/mysql_3306.sock  --no-lock --incremental /backup/incremental/ --incremental-basedir=/backup/incremental/2015-05-12_17-31-45/

参数说明:


1

2

--incremental :指定存储本次增量备份的目录

--incremental-basedir:上次备份的存储目录

 

4.4  增量备份恢复操作

1 关闭mysql服务

2

*(在全备上,使用—redo-only只做已提交事务,不回滚未提交事务,准备过程中除了最后一个不需要此参数,其他都需要,增量备份一定要确定顺序,否则会破坏备份,切记,不确定顺序可以去数据目录下查看xtrabackup_checkpoints文件)

预备阶段:

innobackupex  --defaults-file=/backup/config/3306.cnf --socket=/var/lib/mysql/mysql_3306.sock --apply-log --redo-only --no-lock /backup/full/(--apply-log选项的命令是准备在一个备份上启动mysql服务)

还原第一次增量备份

innobackupex  --defaults-file=/backup/config/3306.cnf --socket=/var/lib/mysql/mysql_3306.sock --apply-log --redo-only --no-lock /backup/full/2015-05-12_18-07-37/  --incremental-dir=/backup/incremental/2015-05-12_18-09-32/

还原第二次增量备份

innobackupex  --defaults-file=/backup/config/3306.cnf --socket=/var/lib/mysql/mysql_3306.sock --apply-log --redo-only --no-lock /backup/full/2015-05-12_18-07-37/ --incremental-dir=/backup/incremental/2015-05-12_18-09-32/

注:1、在增量备份还原过程中,预备阶段最后一个增量的还原不需要 --redo-only 参数 如果忘记了,那么最后还要执行一遍

innobackupex  --defaults-file=/backup/config/3306.cnf --socket=/var/lib/mysql/mysql_3306.sock --apply-log --no-lock /backup/full/

回滚所有未提交事务

2、还原增量备份前要先对完备进行--apply-log --redo-only 然后才可以对每个增量做归并

3、有可能提示加入mysql版本参数,根据提示添加即可     --ibbackup=xtrabackup_56

还原阶段

预备阶段完成后只需要对合成的总备份文件进行还原数据即可

innobackupex  --defaults-file=/backup/config/3306.cnf --socket=/var/lib/mysql/mysql_3306.sock --copy-back /backup/full/2015-05-12_18-07-37/

4.chown -R mysql.mysql data (此步骤一定要有)

5重启数据库,完成恢复

 

 

 

4.5  部分备份与还原

操作前说明:

xtrabackup可以使用部分备份,但是只能在一个表一个文件(独立表空间)的状况下才能使用,设置mysql选项:innodb_file_per_table。

还原部分备份使用表导入的方式,而不是—copy-back选项。

尽管很多场景下可以通过直接复制文件的方式,但是会产生一致性问题不建议使用。

1  创建部分备份

部分备份有3个选项可以使用:

--include:设置正则表达式的格式,匹配的就备份

--table-file:在文件中指定要备份的表,然后通过这个选项传入文件

--database:指定数据库列表

使用include方式


include 方式数据库名也可以匹配:

$ innobackupex --include=‘^mydatabase[.]mytable‘ /path/to/backup

这个选项是传给xtrabackup –tables,所有的数据库目录都会被创建,但是里面可能是空的。

使用tables-file方式


如:

$ echo "mydatabase.mytable" > /tmp/tables.txt

$ innobackupex --tables-file=/tmp/tables.txt /path/to/backup

这个选项是应用xtrabackup –tablefile,只有匹配到表的数据库目录才会被创建

使用database方式


innobackupex可以传递用空格隔开的数组,格式为:databasename[.tablename]

$ innobackupex --databases="mydatabase.mytable mysql" /path/to/backup

注意:--databases选项只会对非innodb引擎表和frm文件产生影响,对于innodb数据文件总是备份的



时间: 2024-10-26 04:28:33

使用innobackupex备份mysql数据库的相关文章

Xtrabackup原理及使用innobackupex进行MySQL数据库备份恢复

Xtrabackup是由percona提供的mysql数据库备份工具,据官方介绍,这也是世界上惟一一款开源的能够对innodb和xtradb数据库进行热备的工具. Xtrabackup中主要包含两个工具: xtrabackup:是用于热备份innodb, xtradb表中数据的工具,不能备份其他类型的表,也不能备份数据表结构: innobackupex:是将xtrabackup进行封装的perl脚本,可以备份和恢复MyISAM表以及数据表结构. 一段官方文档的说明: http://www.per

xtrabackup 备份mysql数据库三: innobackupex 测试一个全量和两个增量的备份恢复测试

## 查看当前库中表的数据 ([email protected]) [test]>select count(*) from t_innodb; +----------+ | count(*) | +----------+ |        0 | +----------+ 1 row in set (0.00 sec) ## 执行插入数据操作,该操作在全备之后执行完成 ([email protected]) [test]>call addTest(100000,0); ## 执行全库备份 #

使用XtraBackup 备份MySQL数据库

本次测试使用XtraBackup备份MySQL数据库 版本:XtraBackup2.4.5+MySQL5.7.16 下载地址:https://www.percona.com/downloads/XtraBackup/ 1.安装XtraBackup 本次为了方便,使用解压版本进行安装,直接解压就可以用了. 使用过程中可能会遇到缺少perl依赖包的问题,我的方法是直接操作把镜像包里的perl都安装了,yum install -y perl* 2.简介 XtraBackup主要包括两个备份工具xtra

学会用各种姿势备份MySQL数据库

学会用各种姿势备份MySQL数据库 大纲 前言 为什么需要备份数据? 数据的备份类型 MySQL备份数据的方式 备份需要考虑的问题 设计合适的备份策略 使用cp进行备份 使用mysqldump+复制BINARY LOG备份 使用lvm2快照备份数据 使用Xtrabackup备份 前言 我们试着想一想, 在生产环境中什么最重要?如果我们服务器的硬件坏了可以维修或者换新, 软件问题可以修复或重新安装, 但是如果数据没了呢?这可能是最恐怖的事情了吧, 我感觉在生产环境中应该没有什么比数据跟更为重要.

备份MySQL数据库的命令

这篇文章主要介绍了mysql数据库备份常用语句,包括数据库压缩备份.备份多个MySQL数据库.备份多个MySQL数据库.将数据库转移到新服务器等语句 代码如下: mysqldump -hhostname -uusername -ppassword databasename > backupfile.sql 备份MySQL数据库为带删除表的格式 备份MySQL数据库为带删除表的格式,能够让该备份覆盖已有数据库而不需要手动删除原有数据库. 代码如下: mysqldump -–add-drop-tab

C#使用MysqlBackup.Net 备份MySQL数据库

首先 声明这篇博文没有什么技术水平  希望各位大神口下留情 好的  咱们进入主题 开场介绍一下这个MysqlBackup.Net dll 是国外开源的作品  官方网站 https://mysqlbackupnet.codeplex.com/ 我这里提供目前官方最新版本 2.0.9.2   解压缩后里面会有两个文件夹   binaries里面是类库 里面分各个.net版本    source code里面是源代码 有兴趣的同学可自行下载研究其代码 点击下载MysqlBackup.Net 因为我项目

一个自动备份mysql数据库的bat文件内容

自动备份mysql数据库,并已当前的日期时间为目录 copy过去, xcopy将近15年没有用dos命令,还是这么亲切 另 本方法是备份数据库文件,不是dump导出,然后再计划任务中使用,我用的是wamp,其他的环境类似的改改即可 ====dbback.bat============ NET STOP wampapacheNET STOP wampmysqldset /a t1=(1%time:~0,2%-100)*1if %t1% LSS 10 set t1=0%t1%set ymd_hms=

Shell脚本-----自动备份Mysql数据库

脚本的整体思路 1.定义需要的变量 2.利用for循环备份需要备份的库,并以库名-当天日期.sql命名,并记录相关日志 3.建立备份当天的日期的目录,向备份的Sql文件移动到该目录 4.压缩打包该目录,以节省空间,打包成功后删除该目录 5.备份目录只备份七天的数据库,第八天删除第一天的备份,目录只会存在连续七天的备份文件 6.查找备份目录下的.log日志文件,超过七天的删除 #!/bin/bash mysql_bin=/usr/local/tdoa/mysql/bin/mysqldump use

[转]一个备份MySQL数据库的简单Shell脚本

本文翻译自 iSystemAdmin 的 <A Simple Shell Script to Backup MySQL Database> Shell脚本是我们写不同类型命令的一种脚本,这些命令在这一个文件中就可以执行.我们也可以逐一敲入命令手动执行.如果我们要使用shell脚本就必须在一开始把这些命令写到一个文本文件中,以后就可以随意反复运行这些命令了. 我首先要在本文带给你的是完整脚本.后面会对该脚本做说明.我假定你已经知道shell scripting. mysqldump和cronta