MySQL Binlog Mixed模式记录成Row格式

概念:

binlog format有三种形式:Statement、Mixed、Row,具体的信息可以自行到网上搜查。

分析(本文碰到的案例):

查看MySQL binlog format

[email protected] : dba_test 02:33:39>show variables like ‘binlog_format%‘;                                                                                                   +---------------+-------+| Variable_name | Value |+---------------+-------+| binlog_format | MIXED |+---------------+-------+

测试语句:

[email protected] : dba_test 02:24:14>create table tmp_test(id int,name varchar(64),age int,primary key(id)) engine = innodb;Query OK, 0 rows affected (0.05 sec)

[email protected] : dba_test 02:24:23>insert into tmp_test values(1,‘aaa‘,11);Query OK, 1 row affected (0.02 sec)

[email protected] : dba_test 02:25:17>insert into tmp_test values(2,‘bbb‘,22);Query OK, 1 row affected (0.02 sec)

[email protected] : dba_test 02:25:23>insert into tmp_test values(3,‘ccc‘,33);Query OK, 1 row affected (0.01 sec)

[email protected] : dba_test 02:25:28>insert into tmp_test values(4,‘ddd‘,44);Query OK, 1 row affected (0.01 sec)

[email protected] : dba_test 02:25:34>insert into tmp_test values(5,‘eee‘,55);Query OK, 1 row affected (0.01 sec)

[email protected] : dba_test 02:25:42>select * from tmp_test;+----+------+------+| id | name | age  |+----+------+------+|  1 | aaa  |   11 ||  2 | bbb  |   22 ||  3 | ccc  |   33 ||  4 | ddd  |   44 ||  5 | eee  |   55 |+----+------+------+5 rows in set (0.01 sec)

[email protected] : dba_test 02:25:50>create table tmp_test_bak(id int,name varchar(64),age int,primary key(id)) engine = innodb;Query OK, 0 rows affected (0.03 sec)

[email protected] : dba_test 02:26:31>insert into tmp_test_bak select * from tmp_test;   ###记录成了Row模式Query OK, 5 rows affected (0.03 sec)Records: 5  Duplicates: 0  Warnings: 0

Binlog 记录图:

问题来了,我想要出来的binlog format是Statement,而不是Row。而一条insert into tb select * from ta的简单语句在Mixed模式下记录了Row模式的binlog。原因是什么?

首先确实在一些特定的情况下,Mixed会被转换成Row模式

. 当 DML 语句更新一个 NDB 表时;. 当函数中包含 UUID() 时;. 2 个及以上包含 AUTO_INCREMENT 字段的表被更新时;. 执行 INSERT DELAYED 语句时;. 用 UDF 时;. 视图中必须要求运用 row 时,例如建立视图时使用了 UUID() 函数;

上面来自网络,有兴趣的可以自己测试测试。而对于本文中的sql,符合不了上面的条件,但binlog也记录成了Row格式。所以还是很奇怪为什么binlog格式被转换了,日常工作的时候有遇到过执行一条sql,会报一个warning:

Warning: Unsafe statement written to the binary log using statement format since BINLOG_FORMAT = STATEMENT

难道因为这个导致转换的?因为上面的SQL可以重现,没有报warning,所以这个情况排除。根据经验想到了一个参数:innodb_locks_unsafe_for_binlog,看到里面讲到事务隔离级别,那就看看隔离级别的情况:

[email protected] : dba_test 05:46:56>select @@global.tx_isolation;+-----------------------+| @@global.tx_isolation |+-----------------------+| READ-COMMITTED        |+-----------------------+1 row in set (0.01 sec)

[email protected] : dba_test 06:36:45>select @@session.tx_isolation;+------------------------+| @@session.tx_isolation |+------------------------+| READ-COMMITTED         |+------------------------+1 row in set (0.01 sec)

看到隔离级别是提交读,即不可重复读。把事务隔离级别设置成默认的 REPEATABLE READ:

[email protected] : dba_test 06:41:02>set session transaction isolation level REPEATABLE READ;                                                                              Query OK, 0 rows affected (0.14 sec)

[email protected] : dba_test 06:41:42>select @@session.tx_isolation;+------------------------+| @@session.tx_isolation |+------------------------+| REPEATABLE-READ        |+------------------------+1 row in set (0.00 sec)

再执行测试里的SQL,发现这时候Mixed的binlog记录了Statement格式,正常了,符合预期了。难道就是这个事务隔离级别的问题引起的?在手册里发现了这句:

NoteIn MySQL 5.7, when READ COMMITTED isolation level is used, or the deprecated innodb_locks_unsafe_for_binlog system variable is enabled, 
there is no InnoDB gap locking except for foreign-key constraint checking and duplicate-key checking. Also, record locks for nonmatching 
rows are released after MySQL has evaluated the WHERE condition.

If you use READ COMMITTED or enable innodb_locks_unsafe_for_binlog, you must use row-based binary logging.

展开可以看例子:

 

经过测试,在5.1、5.5、5.6都有这个情况,可能这个本身就不是问题。:)

时间: 2024-08-27 02:01:54

MySQL Binlog Mixed模式记录成Row格式的相关文章

【20180507】MySQL主从在线修改从库binlog格式从STATEMENT更改成ROW格式

需求 公司内部有几十套基于传统复制的MySQL主从实例,而且binlog的格式都是STATEMENT格式.在接手这些MySQL主从实例之后就有考虑过想将binlog格式更改成ROW格式.而这次则是因为我们elk上面一个第三方工具需要解析和监听binlog信息,并且只能解析ROW格式的binlog,借此机会正好将公司部分MySQL主从复制实例的binlog格式更改成ROW格式. ROW和STATEMENT比对 row格式 优点:就是能够完全保证主从数据的一致性,不会出现因为在SQL中使用MySQL

Mysql Binlog 主从模式配置 与 验证

1)准备两台Mysql服务,并启动服务 127.0.0.1:3306 主机 127.0.0.1:3307 从机 主从配置前需要确认 两机实例间 库.表.数据一致,不然会导致无法同步. 2)主机 my.ini / my.cnf 文件配置 #二进制文件,主机环境必开 log-bin=mysql-bin #主机服务ID ,必须唯一 server-id=111 3)从机 my.ini / my.cnf 文件配置 #二进制文件,从机可以不开,建议开启 log-bin=mysql-bin #主机服务ID ,

MySQL树形查询结果封装成Json格式,返回给easyui treegrid

private String createTreeJson(List<SchedJob> list) {       JSONArray rootArray = new JSONArray();       for (int i=0; i<list.size(); i++) {        SchedJob resource = list.get(i);        System.out.println(resource.getJobid()+"--------"

MySQL——binlog

一.binlog简介: 1.什么是binlog: binlog日志用于记录所有更新了数据或者已经潜在更新了数据(例如,没有匹配任何行的一个DELETE)的所有语句.语句以"事件"的形式保存,它描述数据更改. 2.binlog的记录格式: Mysql binlog日志有三种格式,分别为:Statement ,MiXED ,和ROW: (在MySQL5.7.7版本之后,把binlog_format的默认值修改成了ROW.master将修改表的event写入binlog中,并且master将

MySQL Row格式Binlog的解析(1)

用MySQL 行格式的复制的Slave经常会遇到复制出错1062和1032 错误,一般是镜像异常宕机导致主从复制数据不一致所致,但是有些库本身很大,重建成本很大,并且这些库的数据一致性用户可能都不是太关心的,所以之前的处理办法一般是遇到主键冲突的就跳过,遇到找不到key的就用mysqlbinlog解析一下 把数据补出来,但是这种方法太人肉话,处理起来很慢,所以之前做过一个自动修数据的工具,也是解析binlog日志,然后生成SQL语句去执行. 做这个工具还有另外一个用途,既然能解析BINLOG日志

mysql binlog row格式查看

MySQL 5.1开始,binlog支持row-based的格式,默认情况下只能看到一些经过base-64编码的信息,如 DELIMITER /*!*/; # at 7493962 #090827 5:25:03 server id 1 end_log_pos 0 Start: binlog v 4, server v 5.1.26-rc-community-log created 090827 5:25:03 BINLOG ' L6iVSg8BAAAAZgAAAAAAAAAAAAQANS4xL

老男孩教育每日一题-第83天-binlog是什么?记录的什么?有几种工作模式及企业应用场景

参考答案 含义 binlog:是用于记录所有更新了数据的操作语句,语句以事件的形式保存,它描述数据的更改过程作用:用于实时备份数据,数据库的主从复制log_bin 打开记录binlog功能 binlog的查看 mysqlbinlog /home/mysql/binlog/binlog.000003 binlog的删除:可分为自动与手动删除 自动删除 能过binlog参数expire_logs_days来实现 show binary logs; show variables like "expir

Mysql Binlog 三种格式介绍及分析

一.Mysql Binlog格式介绍       Mysql binlog日志有三种格式,分别为Statement,MiXED,以及ROW! 1.Statement:每一条会修改数据的sql都会记录在binlog中. 优点:不需要记录每一行的变化,减少了binlog日志量,节约了IO,提高性能.(相比row能节约多少性能与日志量,这个取决于应用的SQL情况,正常同一条记录修改或者插入row格式所产生的日志量还小于Statement产生的日志量,但是考虑到如果带条件的update操作,以及整表删除

Mysql Binlog三种格式介绍及分析【转】

一.Mysql Binlog格式介绍       Mysql binlog日志有三种格式,分别为Statement,MiXED,以及ROW! 1.Statement:每一条会修改数据的sql都会记录在binlog中. 优点:不需要记录每一行的变化,减少了binlog日志量,节约了IO,提高性能.(相比row能节约多少性能 与日志量,这个取决于应用的SQL情况,正常同一条记录修改或者插入row格式所产生的日志量还小于Statement产生的日志量,但是考虑到如果带条 件的update操作,以及整表