防伪码:志向不过是记忆的奴隶,生气勃勃地降生,但却很难成长。
一、mysqldump备份结合binlog日志恢复
MySQL 备份一般采取全库备份加日志备份的方式,例如每天执行一次全备份,每小时执行一
次二进制日志备份。这样在 MySQL 故障后可以使用全备份和日志备份将数据恢复到最后一个
二进制日志备份前的任意位置或时间。
1、binlog介绍
mysql的二进制日志记录着该数据库的所有增删改的操作日志(前提是要在自己的服务器上
开启binlog),还包括了这些操作的执行时间。为了显示这些二进制内容,我们可以使用
mysqlbinlog命令来查看。
Binlog的用途
1:主从同步
2:恢复数据库
开启 binary log 功能
通过编辑my.cnf中的 log-bin 选项可以开启二进制日志;形式如下:
log-bin [=DIR/[filename]]
其中,DIR 参数指定二进制文件的存储路径;filename 参数指定二级制文件的文件名,其形
式为filename.number,number 的形式为 000001、000002 等。每次重启mysql服务或运行
mysql> flush logs;都会生成一个新的二进制日志文件,这些日志文件的 number 会不断地递增。
除了生成上述的文件外还会生成一个名为filename.index的文件。这个文件中存储所有二进
制日志文件的清单又称为二进制文件的索引
配置保存以后重启mysql的服务器,用mysql> show variables like ‘log_bin‘;查看 bin-log 是否
开启,如图:
查看产生的 binary log 注:查看binlog内容是为了恢复数据
bin-log 因为是二进制文件,不能通过文件内容查看命令直接打开查看,mysql提供两种方式
查看方式,在介绍之前,我们先对数据库进行一下增删改的操作,否则 log 里边数据有点空。
重新开始一个新的日志文件
查看 MySQL Server 上的二进制日志
查看二进制日志信息的命令:
语法格式:SHOW BINLOG EVENTS [IN ‘log_name‘] [FROM pos] [LIMIT [offset,]row_count]
查看二进制日志中的事件
查看指定的二进制日志中的事件
该命令还包含其他选项以便灵活查看
SHOW BINARY LOGS 等价于 SHOWMASTER LOGS
PURGE BINARY LOGS 用于删除二进制日志,如:
PURGE BINARY LOGS TO ‘mysql-bin.00010‘; //把这个文件之前的其他文件都删除掉
PURGE BINARY LOGS BEFORE ‘2016-08-2822:46:26‘;//把指定时间之前的二进制文件
删除了
RESET MASTER 与 RESET SLAVE
前者清空 index 文件中列出的所有二进制日志,重置 index 文件为空,并创建一个新的二进
制日志文件,一般用于 MASTER 首次启动时。后者使 SLAVE 忘记其在 MASTER 二进制日
志文件中的复制位置,它会删除 master.info、relay-log.info 和所有中继日志文件并开始一
个新的中继日志文件,以便于开始一个干净的复制。在使用 RESET SLAVE 前需先关闭
SLAVE 复制线程。
上述方式可以查看到服务器上存在的二进制日志文件及文件中的事件,但是想查看到文件中
具体的内容并应于恢复场景还得借助mysqlbinlog这个工具。
语法格式:mysqlbinlog [options] log_file ...
输出内容会因日志文件的格式以及mysqlbinlog工具使用的选项不同而略不同。
mysqlbinlog的可用选项可参考 man 手册。
二进制日志文件的格式包含行模式、语句模式和混合模式(也即有服务器决定在什么情况下
记录什么类型的日志),基于语句的日志中事件信息包含执行的语句等,基于行的日志中事
件信息包含的是行的变化信息等。混合模式的日志中两种类型的事件信息都会记录。
为了便于查看记录了行变化信息的事件在当时具体执行了什么样的 SQL 语句可以使用
mysqlbinlog工具的-v(--verbose)选项,该选项会将行事件重构成被注释掉的伪 SQL 语句,
如果想看到更详细的信息可以将该选项给两次如-vv,这样可以包含一些数据类型和元信息
的注释内容,如
先切换到binlog所在的目录下
#mysqlbinlog mysql-bin.000001
#mysqlbinlog -v mysql-bin.000001
#mysqlbinlog -vv mysql-bin.000001
另外mysqlbinlog和可以通过--read-from-remote-server 选项从远程服务器读取二进制日志文
件,这时需要一些而外的连接参数,如-h,-P,-p,-u 等,这些参数仅在指定了
--read-from-remote-server 后有效。
无论是本地二进制日志文件还是远程服务器上的二进制日志文件,无论是行模式、语句模式
还是混合模式的二进制日志文件,被mysqlbinlog工具解析后都可直接应用与 MySQL Server
进行基于时间点、位置或数据库的恢复。
下面我们就来演示如何使用binlog恢复之前删除数据(id=2 那条记录)
注意:在实际生产环境中,如果遇到需要恢复数据库的情况,不要让用户能访问到数据库,
以避免新的数据插入进来,以及在主从的环境下,关闭主从。
查看binlog文件,从中找出 delete from test.tb1 where id=2
[[email protected] ~]# cd/usr/local/mysql/data/
[[email protected] data]# mysqlbinlog -vmysql-bin.000002
/*!50530 [email protected]@SESSION.PSEUDO_SLAVE_MODE=1*/;
/*!50003 [email protected][email protected]@COMPLETION_TYPE,COMPLETION_TYPE=0*/;
DELIMITER /*!*/;
# at 4
#170217 23:55:08 server id 1 end_log_pos 123 CRC32 0x368a9c96 Start: binlog v 4, server v 5.7.13-logcreated 170217 23:55:08
# Warning: this binlog is either in use orwas not closed properly.
BINLOG ‘
3BynWA8BAAAAdwAAAHsAAAABAAQANS43LjEzLWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA
AAAAAAAAAAAAAAAAAAAAAAAAEzgNAAgAEgAEBAQEEgAAXwAEGggAAAAICAgCAAAACgoKKioAEjQA
AZacijY=
‘/*!*/;
# at 123
#170217 23:55:08 server id 1 end_log_pos 154 CRC32 0x3c5eccbd Previous-GTIDs
# [empty]
# at 154
#170217 23:55:38 server id 1 end_log_pos 219 CRC32 0x6dfd7ead Anonymous_GTID last_committed=0 sequence_number=1
SET @@SESSION.GTID_NEXT= ‘ANONYMOUS‘/*!*/;
# at219
#170217 23:55:38 server id 1 end_log_pos 287 CRC32 0xdec1d0d1 Query thread_id=10 exec_time=0 error_code=0
SET TIMESTAMP=1487346938/*!*/;
SET @@session.pseudo_thread_id=10/*!*/;
SET @@session.foreign_key_checks=1,@@session.sql_auto_is_null=0, @@session.unique_checks=1,@@session.autocommit=1/*!*/;
SET @@session.sql_mode=1075838976/*!*/;
SET @@session.auto_increment_increment=1,@@session.auto_increment_offset=1/*!*/;
/*!\C utf8 *//*!*/;
[email protected]@session.character_set_client=33,@@session.collation_connection=33,@@session.collation_server=33/*!*/;
SET @@session.lc_time_names=0/*!*/;
[email protected]@session.collation_database=DEFAULT/*!*/;
BEGIN
/*!*/;
# at 287
#170217 23:55:38 server id 1 end_log_pos 336 CRC32 0x4ca711bf Table_map: `test`.`tb1` mapped to number108
# at 336
#170217 23:55:38 server id 1 end_log_pos 385 CRC320xe7adf1d2 Delete_rows:table id 108 flags: STMT_END_F
BINLOG ‘
+hynWBMBAAAAMQAAAFABAAAAAGwAAAAAAAEABHRlc3QAA3RiMQACAw8CPAACvxGnTA==
+hynWCABAAAAMQAAAIEBAAAAAGwAAAAAAAEAAgAC//wCAAAACHpoYW5nc2Fu0vGt5w==
‘/*!*/;
### DELETE FROM `test`.`tb1`
### WHERE
### @1=2
### @2=‘zhangsan‘
# at 385
#170217 23:55:38 server id 1 end_log_pos 416CRC32 0xec501e68 Xid = 29
COMMIT/*!*/;
从中可以看出 delete 事件发生 position 是 287,事件结束 position 是 416
恢复流程:直接用 bin-log 日志将数据库恢复到删除位置 287 前,然后跳过故障点,再进行恢复
下面所有的操作,命令如下
由于之前没有做过全库备份,所以要使用所有binlog日志恢复,所以生产环境中需要很长时
间恢复,导出相关binlog文件
删除 test 数据库
利用binlog恢复数据
恢复完成后,我们检查下表的数据是否完整
Ok完整的都恢复过来了
mysqlbinlog选项示例
常见的选项有以下几个:
--start-datetime
从二进制日志中读取指定时间戳或者本地计算机时间之后的日志事件。
--stop-datetime
从二进制日志中读取指定时间戳或者本地计算机时间之前的日志事件。
--start-position
从二进制日志中读取指定position 事件位置作为开始。
--stop-position
从二进制日志中读取指定position 事件位置作为事件截至。
2、mysqldump介绍
mysqldump是mysql用于备份和数据转移的一个工具。它主要产生一系列的 SQL 语句,可以
封装到文件,该文件包含有所有重建你的数据库所需要的 SQL 命令如 CREATE DATABASE,
CREATETABLE,INSERT 等等。可以用来实现轻量级的快速迁移或恢复数据库。
mysqldump是将数据表导成 SQL 脚本文件,在不同的 MySQL 版本之间升级时相对比较合适,
这也是最常用的备份方法。
mysqldump一般在数据量很小的时候(几个 G)可以用于备份。当数据量比较大的情况下,
就不建议用mysqldump工具进行备份了。
数据库的导出
导出对象说明:
mysqldump可以针对单个表、多个表、单个数据库、多个数据库、所有数据库进行导出的操
作
#mysqldump [options] db_name [tbl_name ...] //导出指定数据库或单个表
#mysqldump [options] --databases db_name ... //导出多个数据库
#mysqldump[options] --all-databases //导出所有
导出数据库 test
#mysqldump -uroot -p --flush-logs test > /opt/test.sql //--flush-logs 这个选项就会完整备份
的时候重新开启一个新binlog
数据库的导入
#mysql -uroot -p test < /opt/test.sql
在前面我们介绍了mysql的binlog和mysqldump工具,下面我们来学习如何实现mysqldump
全库备份+binlog的数据恢复
环境准备与备份还原:
检查开启binlog
先创建一些原始数据
方案:mysqldump全库备份+binlog还原
1、mysqldump备份方案:
每周一凌晨 1 点全库备份
2、备份步骤
(1)创建备份目录
(2)全库备份
这里我们模拟周一的完整备份数据库任务
备份mysqldump全库备份之前的binlog日志文(注:生产环境中可能不只一个binlog文件)
#cp /usr/local/mysql/data/mysql-bin.000001 /opt/mysqlbackup/daily/
# mysql-uroot -p -e "purge binary logs to ‘mysql-bin.000002‘"
模拟下操作失误,将数据修改错误了
备份自mysqldump之后的binlog日志文件
cp/usr/local/mysql/data/mysql-bin.000002 /opt/mysqlbackup/daily/
上面的模拟的误操作是删除了 id=1 的记录
(3)现在我们使用mysqldump的全库备份和binlog来恢复数据。
使用mysqldump的备份进行全库恢复
# mysql-uroot -p test_db< /opt/mysqlbackup/test_db_2016_09_12.sql
查询一下数据
从显示结果可以看到使用mysqldump备份将数据还原到了备份时的状态,刚才删除的数据
(id=2)恢复回来了,但备份后产生的数据却丢失了所以还得利用binlog进一步不原
因为删除是在全库备份后发生的,而mysqldump全库备份时使用--flush-logs 选项,所以只需
要分析全库备份后的binlog即 mysql-bin.000002。
查看 mysql-bin.000002 中的事件,可以看到有删除事件
mysql-bin.000002| 219 | Query | 1 | 294 | BEGIN |
|mysql-bin.000002 | 294 | Table_map | 1 | 346 | table_id: 108(test_db.tb1) |
|mysql-bin.000002 | 346 |Delete_rows | 1 | 391 | table_id: 108 flags: STMT_END_F |
|mysql-bin.000002 | 391 | Xid | 1 | 422 | COMMIT /* xid=51 */
使用mysqlbinlog命令可以查看备份的binlog文件的详细事件。
恢复流程:我们直接用 bin-log 日志将数据库恢复到删除位置前,然后跳过故障点,再进行恢复
删除后的所有操作。
#mysqlbinlog -v /opt/mysqlbackup/daily/mysql-bin.000002
我们先用mysqlbinlog命令找到 delete 那条语句的位置
# at 219
#170218 0:54:46 server id 1 end_log_pos 294 CRC32 0x60d549db Query thread_id=7 exec_time=0 error_code=0
SETTIMESTAMP=1487350486/*!*/;
[email protected]@session.pseudo_thread_id=7/*!*/;
[email protected]@session.foreign_key_checks=1, @@session.sql_auto_is_null=0,@@session.unique_checks=1, @@session.autocommit=1/*!*/;
[email protected]@session.sql_mode=1075838976/*!*/;
[email protected]@session.auto_increment_increment=1, @@session.auto_increment_offset=1/*!*/;
/*!\Cutf8 *//*!*/;
[email protected]@session.character_set_client=33,@@session.collation_connection=33,@@session.collation_server=33/*!*/;
[email protected]@session.lc_time_names=0/*!*/;
[email protected]@session.collation_database=DEFAULT/*!*/;
BEGIN
/*!*/;
#at 294
#170218 0:54:46 server id 1 end_log_pos 346 CRC32 0xc1921e5d Table_map: `test_db`.`tb1` mapped to number108
#at 346
#170218 0:54:46 server id 1 end_log_pos 391 CRC32 0x2c8954b3 Delete_rows: table id 108 flags: STMT_END_F
BINLOG‘
1iqnWBMBAAAANAAAAFoBAAAAAGwAAAAAAAEAB3Rlc3RfZGIAA3RiMQACAw8CPAACXR6SwQ==
1iqnWCABAAAALQAAAIcBAAAAAGwAAAAAAAEAAgAC//wBAAAABHRvbTGzVIks
‘/*!*/;
###DELETE FROM `test_db`.`tb1`
###WHERE
### @1=1
### @2=‘tom1‘
#at 391
#170218 0:54:46 server id 1 end_log_pos422 CRC32 0xfd1df8a7 Xid = 51
COMMIT/*!*/;
通过mysqlbinlog命令所显示的结果可以看到误操作 delete 的开始postion为 219,结束
position是 422。
从二进制日志中读取指定 position=219 事件位置作为截至,即把数据恢复到 delete 删除前
#mysqlbinlog --stop-position=219 /opt/mysqlbackup/daily/mysql-bin.000002 | mysql-u root -p
从二进制日志中读取指定 position=422 事件位置作为开始,即跳过删除事件,恢复删除事件
之后对数据的正常操作
#mysqlbinlog--start-position=422 /opt/mysqlbackup/daily/mysql-bin.000002 | mysql -u root –p
查看恢复结果:
从上面显示可以看出数据恢复到正常状态
生产环境中Mysql数据库的备份是周期性重复的操作,所以通常是要编写脚本实现,通过
crond计划任务周期性执行备份脚本
mysqldump备份方案:
周日凌晨 1 点全库备份
周一到周六凌晨每隔 4 个小时增量备份一次
设置crontab任务,每天执行备份脚本
#crontab –e
#每个星期日凌晨 1:00 执行完全备份脚本
01 * * 0 /root/mysqlfullbackup.sh >/dev/null 2>&1
#周一到周六每隔 4 个小时增量备份一次
0*/4 * * 1-6 /root/mysqldailybackup.sh >/dev/null 2>&1
mysqlfullbackup.sh脚本内容:
[[email protected]]# cat mysqlfullbackup.sh
#!/bin/sh
#Name:mysqlFullBackup.sh
# 定义数据库目录
mysqlDir=/usr/local/mysql
# 定义用于备份数据库的用户名和密码
user=root
userpwd=123.abc
dbname=test_db
# 定义备份目录
databackupdir=/opt/mysqlbackup
[! -d $databackupdir ]&&mkdir $databackupdir
# 定义邮件正文文件
emailfile=$databackupdir/email.txt
# 定义邮件地址
[email protected]
# 定义备份日志文件
logfile=$databackupdir/mysqlbackup.log
DATE=`date-I`
echo"" > $emailfile
echo$(date +"%y-%m-%d %H:%M:%S") >> $emailfile
cd$databackupdir
# 定义备份文件名
dumpfile=mysql_$DATE.sql
gzdumpfile=mysql_$DATE.sql.tar.gz
# 使用mysqldump备份数据库,请根据具体情况设置参数
$mysqlDir/bin/mysqldump-u$user -p$userpwd --flush-logs -x $dbname> $dumpfile
# 压缩备份文件
if[ $? -eq0 ]; then
tarczf$gzdumpfile $dumpfile>> $emailfile 2>&1
echo"BackupFileName:$gzdumpfile" >> $emailfile
echo"DataBase Backup Success!" >> $emailfile
rm-f $dumpfile
else
echo"DataBase Backup Fail!" >> $emailfile
fi
# 写日志文件
echo"--------------------------------------------------------" >>$logfile
cat$emailfile>> $logfile
# 发送邮件通知
cat$emailfile | mail -s "MySQL Backup" $email
[[email protected]]# cat mysqldailybackup.sh
#!/bin/sh
#Name:mysqlDailyBackup.sh
# 定义数据库目录和数据目录
mysqldir=/usr/local/mysql
datadir=$mysqldir/data
# 定义用于备份数据库的用户名和密码
user=root
userpwd=123.abc
# 定义备份目录,每日备份文件备份到$dataBackupDir/daily
databackupdir=/opt/mysqlbackup
dailybackupdir=$databackupdir/daily
[! -d $dailybackupdir ]&&mkdir -p $databackupdir/daily
# 定义邮件正文文件
emailfile=$databackupdir/email.txt
# 定义邮件地址
[email protected]
# 定义日志文件
logfile=$databackupdir/mysqlbackup.log
echo"" > $emailfile
echo$(date +"%y-%m-%d %H:%M:%S") >> $emailfile
#
# 刷新日志,使数据库使用新的二进制日志文件
$mysqldir/bin/mysqladmin-u$user -p$userpwd flush-logs
cd$datadir
# 得到二进制日志列表
filelist=`catmysql-bin.index`
icounter=0
forfile in $filelist
do
icounter=`expr$icounter + 1`
done
nextnum=0
ifile=0
forfile in $filelist
do
binlogname=`basename$file`
nextnum=`expr$nextnum + 1`
# 跳过最后一个二进制日志(数据库当前使用的二进制日志文件)
if[ $nextnum -eq $icounter ]; then
echo"Skip lastest!" > /dev/null
else
dest=$dailybackupdir/$binlogname
# 跳过已经备份的二进制日志文件
if[ -e $dest ]; then
echo"Skip exist $binlogname!" > /dev/null
else
# 备份日志文件到备份目录
cp$binlogname $dailybackupdir
if[ $? -eq0 ]; then
ifile=`expr$ifile + 1`
echo"$binlogname backup success!" >> $emailfile
fi
fi
fi
done
if[ $ifile -eq 0 ];then
echo"No Binlog Backup!" >> $emailfile
else
echo"Backup $ifile File(s)." >> $emailfile
echo"Backup MySQL Binlog OK!" >> $emailfile
fi
# 发送邮件通知
cat$emailfile | mail -s "MySQL Backup" $email
# 写日志文件
echo"--------------------------------------------------------" >>$logfile
cat$emailfile>> $logfile
二、使用xtrabackup进行 MySQL 数据库备份
前面介绍mysqldump备份方式是采用逻辑备份,其最大的缺陷就是备份和恢复速度都慢,
对于一个小于 50G 的数据库而言,这个速度还是能接受的,但如果数据库非常大,那再使
用mysqldump备份就不太适合了。
这时就需要一种好用又高效的工具,xtrabackup就是其中一款,号称免费版的InnoDB
HotBackup。
Xtrabackup实现是物理备份,而且是物理热备
目前主流的有两个工具可以实现物理热备:ibbackup和xtrabackup;ibbackup是商业软件,
需要授权,非常昂贵。而xtrabackup功能比ibbackup还要强大,但却是开源的。因此我们
这里就来介绍xtrabackup的使用。
Xtrabackup提供了两种命令行工具:
xtrabackup:专用于备份InnoDB和XtraDB引擎的数据;
innobackupex:这是一个perl脚本,在执行过程中会调用xtrabackup命令,这样用该命令即
可以实现备份InnoDB,也可以备份MyISAM引擎的对象。
Xtrabackup是由percona提供的mysql数据库备份工具,特点:
(1)备份过程快速、可靠;
(2)备份过程不会打断正在执行的事务;
(3)能够基于压缩等功能节约磁盘空间和流量;
(4)自动实现备份检验;
(5)还原速度快。
官方链接地址:http://www.percona.com/software/percona-xtrabackup;可以下载源码编译安
装,也可以下载适合的 RPM 包或使用 yum 进行安装或者下载二进制源码包。
安装xtrabackup
1)下载xtrabackup
wgethttps://www.percona.com/downloads/XtraBackup/Percona-XtraBackup-2.4.4/bin
ary/tarball/percona-xtrabackup-2.4.4-Linux-x86_64.tar.gz
2)解压
3)进入解压目录
4)复制 bin 下的所有程序到/usr/bin
Xtrabackup中主要包含两个工具:
xtrabackup:是用于热备份innodb, xtradb表中数据的工具,支持在线热备份,可以在不
加锁的情况下备份Innodb数据表,不过此工具不能操作Myisam引擎表;
innobackupex:是将xtrabackup进行封装的perl脚本,能同时处理Innodb和Myisam,
但在处理Myisam时需要加一个读锁。
由于操作Myisam时需要加读锁,这会堵塞线上服务的写操作,而Innodb没有这样的限制,所以数据库中Innodb表类型所占的比例越大,则越有利。
4)安装相关插件
#yuminstall perl-DBI perl-DBD-MySQL perl-Time-HiResperl-IO-Socket-SSL
perl-TermReadKey.x86_64perl-Digest-MD5 –y
5)下载percona-toolkit 并安装
#wgethttps://www.percona.com/downloads/percona-toolkit/2.2.19/RPM/percona-toolkit-2
.2.19-1.noarch.rpm
下面就可以启动备份了
方案:xtrabackup 完全备份+binlog 增量备份
1、备份
创建备份目录
#mkdir -p /opt/mysqlbackup/{full,inc}
full:全备存放的目录;inc:增量备份存放的目录
1)完全备份
基本语法:# innobackupex --user=DBUSER--password=DBUSERPASS /path/to/BACKUP-DIR/
执行下面的命令进行完全备份:
#innobackupex --user=root --password=123456 /opt/mysqlbackup/full
注: --defaults-file=/etc/my.cnf 指定 mysql 的配置文件 my.cfg,如果指定则必须是第一个
参数。
/path/to/BACKUP-DIR/指定备份所存放的目标目录,备份过程会创建一个以当时备份时间
命名的目录存放备份文件。
出现如下提示。表示成功
备份后的文件:
在备份的同时,备份数据会在备份目录下创建一个以当前日期时间为名字的目录存放备
份文件:
各文件说明:
(1)xtrabackup_checkpoints—— 备份类型(如完全或增量)、备份状态(如是否已经为
prepared状态)和 LSN(日志序列号)范围信息;
每个 InnoDB 页(通常为 16k 大小)都会包含一个日志序列号,即 LSN。LSN 是整个数据库
系统的系统版本号,每个页面相关的 LSN 能够表明此页面最近是如何发生改变的。
(2)xtrabackup_binlog_info—— mysql 服务器当前正在使用的二进制日志文件及至备份
这一刻为止二进制日志事件的位置。
(3)xtrabackup_binlog_pos_innodb—— 二进制日志文件及用于 InnoDB 或 XtraDB 表的二进制日志文件的当前 position。
(4)xtrabackup_binary—— 备份中用到的 xtrabackup 的可执行文件;
(5)backup-my.cnf—— 备份命令用到的配置选项信息;
在使用 innobackupex 进行备份时,还可以使用--no-timestamp 选项来阻止命令自动创建
一个以时间命名的目录;如此一来,innobackupex 命令将会创建一个 BACKUP-DIR 目录
来存储备份数据
注意:相关选项说明:
其中,--user 指定连接数据库的用户名,--password 指定连接数据库的密码,--defaults-file
指定数据库的配置文件,innobackupex 要从其中获取 datadir 等信息;--database 指定要
备份的数据库,这里指定的数据库只对 MyISAM 表有效,对于 InnoDB 数据来说都是全
备(所有数据库中的 InnoDB 数据都进行了备份,不是只备份指定的数据库,恢复时也
一样);/opt/mysqlbackup/full 是备份文件的存放位置。
注意:备份数据库的用户需要具有相应权限,如果要使用一个最小权限的用户进行备份,
则可基于如下命令创建此类用户:
mysql>create user ‘bkpuser‘@‘localhost‘ identified by ‘123456‘;
mysql>revoke all privileges,grant option from ‘bkpuser‘@‘localhost‘;
mysql>grant reload,lock tables,replication client, process on *.* to‘bkpuser‘@‘localhost‘;
mysql>flush privileges;
至此全备完全成功,然后向 mysql 某个库插入几条数据,然后进行增量备份
对完全备份的后数据库更改进行二进制日志增量备份:
查看完全备份时 binlog 日志位置(position):
模拟数据库修改:
2)增量备份二进制文件:
2、还原数据库:
模拟数据库损坏:
我这里直接使用删除数据目录文件来模拟损坏。
#rm -fr /usr/local/mysql/data/*
还原完全备份:
(1)准备(prepare)一个完全备份
一般情况下,在备份完成后,数据尚且不能用于恢复操作,因为备份的数据中可能会包
含尚未提交的事务或已经提交但尚未同步至数据文件中的事务。因此,此时数据文件仍
处于不一致状态。“准备”的主要作用正是通过回滚未提交的事务及同步已经提交的事
务至数据文件也使得数据文件处于一致性状态。
在准备(prepare)过程结束后,InnoDB 表数据已经前滚到整个备份结束的点,而不是
回滚到 xtrabackup 刚开始时的点。
innobakupex命令的--apply-log 选项可用于实现上述功能。如下面的命令:
--apply-log指明是将日志应用到数据文件上,完成之后将备份文件中的数据恢复到数据
库中:
#innobackupex --apply-log /opt/mysqlbackup/full/2016-09-12_11-29-55/
注:/opt/mysqlbackup/full/2016-09-12_11-29-55/备份文件所在目录名称
如果执行正确,其最后输出的几行信息通常如下:
在实现“准备”的过程中,innobackupex 通常还可以使用--use-memory 选项来指定其可
以使用的内存的大小,默认通常为 100M。如果有足够的内存可用,可以多划分一些内
存给 prepare 的过程,以提高其完成速度。
innobackupex命令的--copy-back 选项用于执行恢复操作,其通过复制所有数据相关的文
件至 mysql 服务器 DATADIR 目录中来执行恢复过程。innobackupex 通过 backup-my.cnf
来获取 DATADIR 目录的相关信息。
(2)还原数据库语法:
#innobackupex --copy-back /opt/mysqlbackup/full/2016-09-12_11-29-55/
这里的--copy-back 指明是进行数据恢复。数据恢复完成之后,需要修改相关文件的权
限 mysql 数据库才能正常启动。
如果执行正确,其输出信息的最后几行通常如下:
请确保如上信息的最行一行出现“completed OK!”。
修改还原后的数据目录权限:
当数据恢复至 DATADIR 目录以后,还需要确保所有数据文件的属主和属组均为正确的用
户,如 mysql,否则,在启动 mysqld 之前还需要事先修改数据文件的属主和属组。如:
验证还原后的数据:
(3)还原增量备份:
为了防止还原时产生大量的二进制日志,在还原时可临时关闭二进制日志后再还原:
重新启动二进制日志并验证还原数据:
mysql>set sql_log_bin=1;
验证数据是否恢复回来
附:Xtrabackup 的“流”及“备份压缩”功能
Xtrabackup对备份的数据文件支持“流”功能,即可以将备份的数据通过 STDOUT 传
输给 tar 程序进行归档,而不是默认的直接保存至某备份目录中。要使用此功能,仅需
要使用--stream 选项即可。如:
#innobackupex --user=root --password="123456" --stream=tar/opt/mysqlbackup/full/
|gzip >/opt/mysqlbackup/full/full_`date +%F_%H%M%S`.tar.gz