MySQL第五天(增量备份和增量恢复)

day05
一、数据备份与恢复-增量备份和增量恢复
a.binlog日志介绍(二进制文件):使用Mysql数据库服务日志文件类型的一种。记录除查询之外的sql命令。默认没启用

查询的sql包括:select desc show

不是查询的命令:insert update delete create drop grant revoke

b.启用binlog日志
如何启用
日志默认存放位置
/var/lib/mysql
日志默认名称
主机名-bin.000001
51-bin.000001 (大于500M自动生成000002)
51-bin.index #索引文件

修改日志存储位置和名称?
mkdir /logdir
chown mysql /logdir
setenforce 0
vim /etc/my.cnf
server_id=51
#log-bin
log-bin=/logdir/plj ##指定日志文件位置
binlog-format=”mixed” ###指定日志保存类型,显示sql命令的完整格式,若不添加只会记录命令
#systemctl restart mysqld

查看日志文件内容(用命令查看,因为是二进制文件)
]#mysqlbinlog binlog日志 | grep -i insert
]#mysqlbinlog binlog日志

e.日志文件记录sql命令的方式
时间点--start-datetime="yyyy-mm-dd hh:mm:ss"
--stop-datetime="yyyy-mm-dd hh:mm:ss"

偏移量 --start-position=数字
--stop-position=数字

]#mysqlbinlog [选项] binlog日志 | mysql -uroot -p123456
日志默认存放位置 /var/lib/mysql
日志默认名称 主机-bin.000001
51-bin.000001 binlog日志文件(大于500M自动生成000002)
51-bin.index 索引文件

f.执行日志文件中的sql命令恢复数据
#mysqlbinlog [选项] 日志名 | mysql -uroot -p
mysql> delete from db3.user where id=54;
[[email protected] logdir]# mysqlbinlog --start-position=328 --stop-position=1102 plj.000001 | mysql -uroot -p654321

g.手动创建新的文件
mysql>flush logs; #刷新一次生成一个 哪个编号大日志往哪个存
mysql> system ls /logdir;
plj.000001 plj.000002 plj.index

[[email protected] logdir]# mysql -uroot -p123456 -e "flush logs" #命令行直接执行sql命令
mysql: [Warning] Using a password on the command line interface can be insecure.
[[email protected] logdir]# ls
plj.000001 plj.000002 plj.000003 plj.index

[[email protected] logdir]# ls
plj.000001 plj.000002 plj.000003 plj.index
[[email protected] logdir]# systemctl restart mysqld
[[email protected] logdir]# ls
plj.000001 plj.000002 plj.000003 plj.000004 plj.index

]#systemctl restart mysqld

#]mysqldump -uroot -p654321 --flush-logs db3 > db3.sql #备份时生成新的日志文件
f.删除日志文件
f.1 使用sql命令删除
mysql> reset master;
Query OK, 0 rows affected (0.21 sec)
mysql> system ls /logdir;
plj.000001 plj.index

mysql> purge master logs to "plj.000005"; #删除指定000005编号之前的日志所有index(不包括000005日志文件)
Query OK, 0 rows affected (0.14 sec)
mysql> system ls /logdir;
plj.000005 plj.index

f.2 使用系统删除
rm -rf 日志文件

++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++==
6.2 安装第3方软件提供的命令,对数据做增量备份
[[email protected] 09.mysql]# rpm -ivh libev-4.15-1.el6.rf.x86_64.rpm
警告:libev-4.15-1.el6.rf.x86_64.rpm: 头V3 DSA/SHA1 Signature, 密钥 ID 6b8d79e6: NOKEY
准备中... ################################# [100%]
软件包 libev-4.15-1.el6.rf.x86_64 已经安装
[[email protected] 09.mysql]# rpm -ivh percona-xtrabackup-24-2.4.7-1.el7.x86_64.rpm
警告:percona-xtrabackup-24-2.4.7-1.el7.x86_64.rpm: 头V4 DSA/SHA1 Signature, 密钥 ID cd2efd2a: NOKEY
准备中... ################################# [100%]
软件包 percona-xtrabackup-24-2.4.7-1.el7.x86_64 已经安装

[[email protected] 09.mysql]# rpm -qa |grep percona
percona-xtrabackup-24-2.4.7-1.el7.x86_64
[[email protected] 09.mysql]# rpm -ql percona-xtrabackup-24-2.4.7-1.el7.x86_64
/usr/bin/innobackupex
/usr/bin/xbcloud
/usr/bin/xbcloud_osenv
/usr/bin/xbcrypt
/usr/bin/xbstream
/usr/bin/xtrabackup
/usr/share/doc/percona-xtrabackup-24-2.4.7
/usr/share/doc/percona-xtrabackup-24-2.4.7/COPYING
/usr/share/man/man1/innobackupex.1.gz
/usr/share/man/man1/xbcrypt.1.gz
/usr/share/man/man1/xbstream.1.gz
/usr/share/man/man1/xtrabackup.1.gz

完全备份
[[email protected] 09.mysql]# innobackupex --user root --password 123456 --databases="mysql sys performance_schema db5" /alldir --no-timestamp ##/alldir为备份目标目录,且必须为空,如果需要日期目录,不需要--no-timestamp
[[email protected] 09.mysql]# ls /alldir
backup-my.cnf db5 ib_buffer_pool ibdata1 mysql performance_schema sys xtrabackup_binlog_info xtrabackup_checkpoints xtrabackup_info xtrabackup_logfile

完全恢复(/var/lib/mysql必须为空)
[[email protected] 09.mysql]# rm -rf /var/lib/mysql

[[email protected] 09.mysql]# mkdir /var/lib/mysql

[[email protected] 09.mysql]# innobackupex --user root --password 123456 --databases="mysql sys performance_schema db5" --apply-log /alldir/ ##恢复日志

[[email protected] 09.mysql]# innobackupex --user root --password 123456 --databases="mysql sys performance_schema db5" --copy-back /alldir/ ##恢复数据

[[email protected] 09.mysql]# ls /var/lib/mysql
db5 ib_buffer_pool ibdata1 ib_logfile0 ib_logfile1 ibtmp1 mysql performance_schema sys xtrabackup_binlog_pos_innodb xtrabackup_info

[[email protected] 09.mysql]# chown -R mysql:mysql /var/lib/mysql

[[email protected] 09.mysql]# ls -ld /var/lib/mysql
drwxr-xr-x. 6 mysql mysql 4096 2月 27 04:24 /var/lib/mysql

[[email protected] 09.mysql]# systemctl restart mysqld

[[email protected] 09.mysql]# mysql -uroot -p123456
mysql>

增量备份:
1.有一次完全备份
]#innobackupex --user root --password 123456
--databases="mysql sys performance_schema db5" /fullbak --no-timestamp
insert into db5.t1 values(400);
select * from db5.t1;

2.增量备份:改变数据后实行增量备份(备份新生成的数据)
]#innobackupex --user root --password 123456
--databases="mysql sys performance_schema db5"
--incremental /onedir
--incremental-basedir=/fullbak --no-timestamp

insert into db5.t1 values(500);
select * from db5.t1;

3.第二次增量备份 改变数据后实行增量备份
[[email protected] 09.mysql]# innobackupex --user root --password 123456 --databases="mysql sys performance_schema db5" --incremental /twodir --incremental-basedir=/onedir --no-timestamp

增量恢复数据?(第一次,第二次,第三次备份的序列号和数据,恢复(合并)到第一次备份目录下 ##序列号和数据合并)
--applay-log 恢复日志
--redo-only 合并日志
--incremental-dir=目录名 恢复数据时,第几次增量备份时使用的备份目录

1.清空数据库目录
rm -rf /var/lib/mysql
mkdir /var/lib/mysql
2.恢复日志(按顺序恢复:完全备份,第二次增量备份,第三次增量备份,第四次一直往后推的顺序合并)
]#innobackupex --user root --password 123456
--databases="mysql sys performance_schema db5"
--apply-log --redo-only /fullbak

]#innobackupex --user root --password 123456
--databases="mysql sys performance_schema db5"
--apply-log --redo-only /fullbak --incremental-dir="/onedir"

innobackupex --user root --password 123456
--databases="mysql sys performance_schema db5"
--apply-log --redo-only /fullbak --incremental-dir="/twodir"

3.拷贝备份数据到数据库目录下
]#innobackupex --user root --password 123456
--databases="mysql sys performance_schema db5"
--copy-back /fullbak

4.修改数据库目录的所有者所有组
]#chown -R mysql:mysql /var/lib/mysql
5.重启数据库服务
systemctl stop mysqld

6 查看数据
mysql -uroot -p123456 db5
mysql>show tables;

]#innobackupex --user root --password 123456
--databases="mysql sys performance_schema db5"
--incremental /firstdir
--incremental-basedir=/fullbak --no-timestamp

增量备份工作原理?
innobackupex 对innodb存储引擎的能够实现增量备份。
innodb存储引擎 有事务日志文件记录sql操作和数据信息

/var/lib/mysql/
ib_logfile0 ##存放sql命令操作
ib_logfile1 ##存放sql命令操作
ibdata1 ##存放数据信息

LSN(序列号) ##ib_logfile0存放的sql命令操作从哪到哪 变成序列号从哪到哪(范围)

备份目录下:
xtrabackup_checkpoints (记录LSN) ib_logfile0存放的sql命令操作从哪到哪 变成序列号从哪到哪(范围),用于与上次备份的lsn文件做比较
xtrabackup_logfile (记录SQL)
ibdata1 (数据信息)
数据 在对应库的文件夹里

从完全备份文件中恢复某个表的记录
1.1做完全备份
[[email protected] ~]# innobackupex --user root --password 123456 --databases="db6" /db6allbak --no-timestamp
[[email protected] ~]# ls /db6allbak/db6/
a.frm a.ibd b.frm b.ibd db.opt
[[email protected] ~]# ls /var/lib/mysql/db6
a.frm a.ibd b.frm b.ibd db.opt

模拟删除:
mysql>drop table db6.a;

2.2 恢复步骤
--export
import
mysql>alter table 库名.表名 discard

1导出表信息
innobackupex --user root --password 123456 --databases="db6" --apply-log --export /db6allbak ##db6allbak为导出表目标目录
]#ls /db6allbak/db6/
a.cfg a.exp a.frm a.ibd b.cfg b.exp b.frm b.ibd db.opt

2.建表,删除表空间(表结构必须和删除之前的结构一样)
mysql> create table db6.a(name char(10));
Query OK, 0 rows affected (0.29 sec)
mysql>alter table db6.a discard tablespace; ##删除空表间文件ibd
[[email protected] sys]# ls /var/lib/mysql/db6/
a.frm b.frm b.ibd c.frm c.ibd db.opt

4.备份的表信息文件拷贝到数据库目录下,并修改所有者和组为mysql
]#cp /db6allbak/db6/a.{cfg,exp,ibd} /var/lib/mysql/db6/
]#chown mysql:mysql /var/lib/mysql/db6/a.*
[[email protected] sys]# ls /var/lib/mysql/db6/
a.cfg a.exp a.frm a.ibd b.frm b.ibd c.frm c.ibd db.opt

5.导入表空间
mysql>alter table db6.a import tablespace;

6.查看表记录
mysql>select * from db6.a
+++++++++++++++++++++++++++++++=

原文地址:http://blog.51cto.com/13587169/2074440

时间: 2024-12-29 06:48:34

MySQL第五天(增量备份和增量恢复)的相关文章

mysql增量备份及断点恢复

简介增量备份是指在一次全备份或上一次增量备份后,以后每次的备份只需备份与前一次相比增加或者被修改的文件.这就意味着,第一次增量备份的对象是进行全备后所产生的增加和修改的文件:第二次增量备份的对象是进行第一次增量备份后所产生的增加和修改的文件,如此类推.目的解决完全备份中时间长.恢复慢的问题,采取了增量备份特点优:无重复数据,备份量不大,时间短缺:需要上次完全备份及完全备份后的增量备份才能恢复,需对增量备份逐个反复恢复,操作繁琐实现方式通过mysql的二进制日志间接实现增量备份:二进制日志保存了所

9.11、mysql增量备份和增量恢复介绍

1.增量备份: 增量数据是从上次全量备份之后,更新的新数据,对于mysql来说,binlog日志就是mysql的增量数据: (1)按天进行备份: 周一00点全量备份 周二00点全量备份 ...... 01.sql.gz 02.sql.gz ...... 周一增量备份 周二增量备份 ...... mysql-bin.000001 mysql-bin.000002 mysql-bin.000003 mysql-bin.index mysql-bin.000004 mysql-bin.000005 m

MySQL之XtraBackup实现完全备份、增量备份、数据还原

XtraBackup:是一个开源的免费的备份工具,支持热备份,对Innodb和MyISam存储引擎都支持备份,Innodb为热备.MyISam为温备份.且支持将备份结果进行压缩存放.支持部分备份(如只备份某个库或者某个库中的某个表).支持即时点数据还原.支持完全备份.支持增量备份.支持并行备份.流式备份.并行备份压缩.支持将单个表数据从一个数据库中导出然后导入另一个数据库中.支持将表恢复到一个不同的数据库server上 mylvmbackup:是一款可以实现自动化对LVM逻辑卷上的数据实现几乎热

mysql系列之5--完全备份和增量备份

一.利用系统自带的工具实现完全备份:mysqldump 1.备份所有的数据库: mysqldump -hlocalhost -uroot -p12345678   --all-databases > /opt/$(date +%F).sql //--all-databases--所有数据库 /opt/$(date +%F).sql 重定向到以日期命名的文件 2.备份指定的数据库: mysqldump -hlocalhost -uroot -p12345678   db1 db2  > /opt

xtrabackup安装及全备,增量备份,及恢复

xtrabackup特性: 1.支持热备份 2.支持对InnoDB.MyISAM,xtradb存储引擎的备份 3.备份过程快速.可靠 4.备份过程不会打断正在执行的事务 5.能够基于压缩等功能节约磁盘空间和流量 6.自动实现备份检验 7.还原速度快 (一)安装: 官网:https://www.percona.com/doc/percona-xtrabackup/LATEST/installation/yum_repo.html ubuntu: wget https://repo.percona.

MySQL数据库 分表分库备份及批量恢复如何进行?

脚本实现 #!/bin/bash for db_name in `mysql -e "show databases;"|sed 1d` do mkdir -p /backup/$db_name for table_name in `mysql -e "show tables from $db_name"|sed 1d` do /application/mysql/bin/mysqldump  --master-data=2 $db_name $table_name

mysql 利用binlog增量备份,还原实例

mysql 利用binlog增量备份,还原实例 张映 发表于 2010-09-29 分类目录: mysql 一,什么是增量备份 增量备份,就是将新增加的数据进行备份.假如你一个数据库,有10G的数据,每天会增加10M的数据,数据库每天都要备份一次,这么多数据是不是都要备份呢?还是只要备份增加的数据呢,很显然,我只要备份增加的数据.这样减少服务器的负担. 二,启用binlog vi my.cnf log-bin=/var/lib/mysql/mysql-bin.log,如果是这样的话log-bin

mysql增量备份 percona-xtrabackup

先说下实际环境 阿里云买的ESC跑的mysql服务,目前由于数据量过大,数据库目前有800多GB,每次全备需要等20多个小时才能够完成,然后就想到做增量备份,写下此文档 一.测试环境 [[email protected] ~]# cat /etc/redhat-release CentOS release 6.2 (Final) [[email protected] ~]# mysql --version mysql Ver 14.14 Distrib 5.5.20, for Linux (x8

MySQL 利用binlog增量备份+还原实例

一,什么是增量备份 增量备份,就是将新增加的数据进行备份.假如你一个数据库,有10G的数据,每天会增加10M的数据,数据库每天都要备份一次,这么多数据是不是都要备份呢?还是只要备份增加的数据呢,很显然,我只要备份增加的数据.这样减少服务器的负担. 二,启用binlog vi my.cnf log-bin=/var/lib/mysql/mysql-bin.log,如果是这样的话log-bin=mysql-bin.log默认在datadir目录下面 [[email protected] mysql]