利用binlog2sql快速闪回误删除数据

下面进行实战演练:
binlog2sql工具的下载地址: https://github.com/danfengcao/binlog2sql
第一步:环境准备安装各种依赖的工具包列表

python-pip ,
PyMySQL ,
python-mysql-replication,
wheel argparse
第二步:解压binlog2sql软件,命令如下

unzip  binlog2sql-master.zip
cd binlog2sql-master
pip install –r requirements.txt

第三步:通过python binlog2sql.py --help命令,来查看重要参数的使用;

-B, --flashback 生成回滚语句
--start-file 需要解析的binlog文件
--start-position 解析binlog的起始位置
--stop-position解析binlog的结束位置
--start-datetime 从哪个时间点的binlog开始解析,格式必须为datetime
--stop-datetime 到哪个时间点的binlog停止解析,格式必须为datetime
-d, --databases 只输出目标db的sql
-t, --tables 只输出目标tables的sql
第四步:开始模拟数据删除
首先删除掉zs库下,t表中的数据

[email protected] 14:26:  [zs]> select * from t;
+----+------+---------+
| id | name | address |
+----+------+---------+
|  1 | aaa  | bj      |
|  2 | bbb  | sh      |
|  3 | ccc  | gz      |
|  4 | ddd  | sy      |
|  5 | eee  | fj      |
+----+------+---------+
5 rows in set (0.00 sec)

[email protected] 14:26:  [zs]> delete from t;
Query OK, 5 rows affected (0.04 sec)

[email protected] 14:27:  [zs]> select * from t;
Empty set (0.00 sec)

第五步:需要创建一个闪回用户

create user ‘zs_test‘@‘%‘ identified by ‘123456‘;
grant select,replication slave,replication client on *.* to ‘zs_test‘@‘%‘ ;
flush privileges;

第六步:确定当前binlog文件和position位置

[email protected] 14:41:  [zs]> show master status;
+---------------------+----------+--------------+------------------+------------------------------------------+
| File                | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set                        |
+---------------------+----------+--------------+------------------+------------------------------------------+
| mysql-binlog.000002 |     2091 |              |                  | e10f0ead-d595-11e7-82cb-080027cd683a:1-8 |
+---------------------+----------+--------------+------------------+------------------------------------------+

可以看到当前binlog是:mysql-binlog.000002
位置偏移量:2091

第七步:需要预估下时间,误操作的时间范围应该在下午2点20分到2点30分之间。命令如下:

python binlog2sql.py -h192.168.56.102 -P3306 -uzs_test -p123456 -dzs -tt --start-file=‘mysql-binlog.000002‘ --start-datetime=‘2017-11-30 14:20:00‘ --stop-datetime=‘2017-11-30 14:30:00‘
输出结果:
DELETE FROM zs.t WHERE address=‘bj‘ AND id=1 AND name=‘aaa‘ LIMIT 1; #start 1214 end 1427 time 2017-11-30 14:27:46
DELETE FROM zs.t WHERE address=‘sh‘ AND id=2 AND name=‘bbb‘ LIMIT 1; #start 1214 end 1427 time 2017-11-30 14:27:46
DELETE FROM zs.t WHERE address=‘gz‘ AND id=3 AND name=‘ccc‘ LIMIT 1; #start 1214 end 1427 time 2017-11-30 14:27:46
DELETE FROM zs.t WHERE address=‘sy‘ AND id=4 AND name=‘ddd‘ LIMIT 1; #start 1214 end 1427 time 2017-11-30 14:27:46
DELETE FROM zs.t WHERE address=‘fj‘ AND id=5 AND name=‘eee‘ LIMIT 1; #start 1214 end 1427 time 2017-11-30 14:27:46

从解析结果中我们了解到,误操作sql的位置是在1214~1427之间;这样就可以进一步过滤,使用flashback模式生成回滚sql;
命令如下:
python binlog2sql.py -h192.168.56.102 -P3306 -uzs_test -p123456 -dzs -tt --start-file=‘mysql-binlog.000002‘ --start-position=1214 --stop-position=1427 -B >t_rollback.sql

查看闪回导出文件:

[[email protected] binlog2sql]# cat t_rollback.sql
INSERT INTO zs.t(address, id, name) VALUES (‘fj‘, 5, ‘eee‘); #start 1214 end 1427 time 2017-11-30 14:27:46
INSERT INTO zs.t(address, id, name) VALUES (‘sy‘, 4, ‘ddd‘); #start 1214 end 1427 time 2017-11-30 14:27:46
INSERT INTO zs.t(address, id, name) VALUES (‘gz‘, 3, ‘ccc‘); #start 1214 end 1427 time 2017-11-30 14:27:46
INSERT INTO zs.t(address, id, name) VALUES (‘sh‘, 2, ‘bbb‘); #start 1214 end 1427 time 2017-11-30 14:27:46
INSERT INTO zs.t(address, id, name) VALUES (‘bj‘, 1, ‘aaa‘); #start 1214 end 1427 time 2017-11

第八步:应用回滚文件,恢复数据。命令如下:
/usr/local/mysql/bin/mysql -uroot -proot123 zs < t_rollback.sql

第九步:检验恢复数据是否成功

[email protected] 15:09: [zs]> select * from t;
+----+------+---------+
| id | name | address |
+----+------+---------+
| 1 | aaa | bj |
| 2 | bbb | sh |
| 3 | ccc | gz |
| 4 | ddd | sy |
| 5 | eee | fj |
+----+------+---------+
5 rows in set (0.00 sec)
验证恢复数据成功!

原文地址:https://blog.51cto.com/hsuing/2383375

时间: 2024-10-10 13:48:10

利用binlog2sql快速闪回误删除数据的相关文章

binlog2sql快速闪回

一.说明: DML(data manipulation language):       它们是SELECT.UPDATE.INSERT.DELETE,就象它的名字一样,这4条命令是用来对数据库里的数据进行操作的语言DDL(data definition language):       DDL比DML要多,主要的命令有CREATE.ALTER.DROP等,DDL主要是用在定义或改变表(TABLE)的结构,数据类型,表之间的链接和约束等初始化工作上,他们大多在建立表时使用DCL(Data Con

Oracle 闪回 找回数据的实现方法

Oracle 闪回 找回数据的实现方法 闪回技术是Oracle强大数据库备份恢复机制的一部分,在数据库发生逻辑错误的时候,闪回技术能提供快速且最小损失的恢复.这篇文章主要介绍了Oracle 闪回 找回数据的实现方法,需要的朋友可以参考下 闪回技术是Oracle强大数据库备份恢复机制的一部分,在数据库发生逻辑错误的时候,闪回技术能提供快速且最小损失的恢复(多数闪回功能都能在数据库联机状态下完成).需要注意的是,闪回技术旨在快速恢复逻辑错误,对于物理损坏或是介质丢失的错误,闪回技术就回天乏术了,还是

binlog2sql闪回恢复数据

用途: 1.数据快速回滚 2.从binlog生成标准sql 使用限制: 1.必须设置binlog_format=ROW 2.binlog_row_image=full,该参数默认为FULL 3.恢复用户拥有的最小权限集合为:select, super/replication client, replication slave 建议授权 GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 权限说明 select:需要读取ser

Oracle 闪回 找回数据

使用闪回技术,实现基于磁盘上闪回恢复区的自动备份与还原. 一.恢复表对象 1.创建学生表 create table STUDENT ( idno INTEGER, name VARCHAR2(30), sex VARCHAR2(30) ) 2.添加记录 insert into student (IDNO, NAME, SEX) values (1, '李云丽', '女'); insert into student (IDNO, NAME, SEX) values (2, '王强', ' 男 ')

oracle数据库误删数据后,及时闪回恢复数据

删除数据后最好不要进行其他无关操作 ①确定删除数据的时间 ②此语句找出删除的数据:select * from 表名 as of timestamp to_timestamp('删除时间点','yyyy-mm-dd hh24:mi:ss') ③删除的数据重新插入原表:insert into 表名 (select * from 表名 as of timestamp to_timestamp('删除时间点','yyyy-mm-dd hh24:mi:ss')); 要保证主键不重复.

[oracle] 闪回误删除表

删除表 SQL> drop table c##sapr3.test; Table dropped. SQL> select count(*) from c##sapr3.test; select count(*) from c##sapr3.test * ERROR at line 1: ORA-00942: table or view does not exist 恢复 SQL> flashback table c##sapr3.test to before drop; Flashba

Mysql数据闪回的奇技淫巧(binlog2sql)

一.概述 binlog2sql是一个开源项目,应用于大众点评线上环境.类似于ORACLE中的闪回功能,binlog2sql可以基于时间点或者位置偏移量进行数据恢复.从MySQL binlog解析出你要的SQL.根据不同选项,你可以得到原始SQL.回滚SQL.去除主键的INSERT SQL等.也就是对于insert操作会生成对应的delete语句,反之delete操作会生出对应的insert语句,update操作会生成相反的语句. 关于binlog2sql的闪回详细介绍可参考闪回原理与实战.我也是

使用闪回挽救我们的数据

我们在开发和运维过程中,经常遇到数据被误删除的情况.无论是在应用开发中的Bug,还是修改数据的时候,如果提交了错误数据修改结果,会带来很多问题.一般来说,一旦提交Commit事务,我们是不能获取到之前的数据情况,除非使用较复杂的数据恢复手段,利用备份数据恢复. 但是在Oracle中,可以使用其闪回FlashBack特性来解决这个问题.首先,声明一点,闪回Flashback的范围很大,包括数据库.表.数据均是可以Flashback的,但是机制差别很大.本文说的是简单的数据flashback,用来快

Mysql闪回工具之binlog2sql的原理及其使用

生产上误删数据.误改数据的现象也是时常发生的现象,作为运维这时候就需要出来补锅了,最开始的做法是恢复备份,然后从中找到需要的数据再进行修复,但是这个时间太长了,对于大表少数数据的修复来讲,动作太大,成本也大. 当然还有其他的一些操作方法,我们今天有主角. MySQL 闪回工具 --   binlog2sql 用途 数据回滚 主从切换后数据不一致的修复 从 binlog 生成标准 SQL,带来的衍生功能 闪回原理简析 开始之前,先说说闪回.我们都知道 MySQL binlog 以 event 为单