master log 与relay log的关系

--master log 与relay log的关系

-------------------------------2014/06/09

Just to clarify, there are three sets of
file/position coordinates in SHOW SLAVE STATUS:

1) The position, ON THE MASTER, from which the
I/O thread is reading: Master_Log_File/Read_Master_Log_Pos. -----相对于主库,从库读取主库的二进制日志的位置,是IO线程

2) The position, IN THE RELAY LOGS, at which
the SQL thread is executing: Relay_Log_File/Relay_Log_Pos ----相对于从库,是从库的sql线程执行到的位置

3) The position, ON THE MASTER, at which the
SQL thread is executing: Relay_Master_Log_File/Exec_Master_Log_Pos
----相对于主库,是从库的sql线程执行到的位置

Numbers 2) and 3) are the same thing, but one
is on the slave and the other is on the master.

mysql > show slave status \G

Master_Log_File: mysql-bin-m.000329

    Read_Master_Log_Pos:
863952156----上面二行代表IO线程,相对于主库

Relay_Log_File: mysql-relay.003990

    Relay_Log_Pos:
25077069—上面二行代表了sql线程,相对于从库

Relay_Master_Log_File: mysql-bin-m.000329

    Exec_Master_Log_Pos:
863936961---上面二行代表了sql线程,相对主库

    (为了方便演示,我把上面这行提前了.)

    Relay_Log_Space:
25092264---当前relay-log文件的大小

Slave_IO_Running: Yes

Slave_SQL_Running: Yes

从上面可以看到,read_master_log_pos
始终会大于exec_master_log_pos的值:因为一个值是代表io线程,一个值代表sql线程;sql线程肯定在io线程之后.(当然,io线程和sql线程要读写同一个文件,否则比较就失去意义了)
.在binlog中,Xid代表了提交的事务号.现在我们分别去主从库看看,验证一下,在主库的mysql-bin-m.000329文件的863936961处是否与从库的mysql-relay.003990文件的25077069处有相同的sql语句,
先看主库的binlog:


# at 863936961

#100111 20:11:39 server id 115000 end_log_pos 863937234 Query thread_id=515886 exec_time=0 error_code=0

use mall00/*!*/;

UPDATE mall00.t_item_sid88 SET item_end_time = 1263816699, item_is_online = 1, item_status = 1 WHERE iid IN (94322390, 94322428, 94322452, 94322473, 94322506, 94322532, 94322604, 94322641, 94322670, 94322706)/*!*/;

# at 863937234

#100111 20:11:39 server id 115000 end_log_pos 863937261 Xid = 1225244590

COMMIT/*!*/;

# at 863937261

再看从库的relaylog:


# at 25077069

#100111 20:11:39 server id 115000 end_log_pos 863937234 Query thread_id=515886 exec_time=0 error_code=0

use mall00/*!*/;

UPDATE mall00.t_item_sid88 SET item_end_time = 1263816699, item_is_online = 1, item_status = 1 WHERE iid IN (94322390, 94322428, 94322452, 94322473, 94322506, 94322532, 94322604, 94322641, 94322670, 94322706)/*!*/;

# at 25077342

#100111 20:11:39 server id 115000 end_log_pos 863937261 Xid = 1225244590

COMMIT/*!*/;

从上面的日志中,可以看到binlog与realy-log的内容是相同的,除了开头的at位置处的偏移量.因为偏移量始终是相对于文件自身来说,主库上相对于binlog本身,从库上相对于relay-log本身.还可以看到,在每个query语句过后,都有一个Xid
的event,提交该事务,也表明在mysql中是自动提交的,每条语句执行完毕后,系统都自动提交了.那么在基于行的复制中,可能会看到多条binlog
语句才对应一次commit,自然说明这是基于行的复制.

还有一点,就是主库和从库的对应位置的event大小是相同的

例如上面的:

25077342-25077069(从库上event大小) =
863937234-863936961(主库上event大小)

否则,说明从库的relay-log丢失了,有可能是操作系统缓存丢失,也可能是mysql
异常crash导致relay-log buffer中的数据丢失.那么这时候就需要重设主从同步了.

时间: 2024-10-22 04:38:25

master log 与relay log的关系的相关文章

mysql relay log参数汇总

前言:MySQL进行主主复制或主从复制的时候会在配置文件制定的目录下面产生相应的relay log,本文档总结这些相关参数的定义及解释. 1.什么是relay log The relay log, like the binary log, consists of a set of numbered files containing events that describe database changes, and an index file that contains the names of

Replication_Error:Relay log write failure:could not queue event from master

Mysql Version :5.6.16 OS Version :CentOS release 6.4 (Final) Replication:Master-Master  刚刚突然发现DB Master1(当前读写)磁盘满了,DB Master2(当前不对外提供写)replication 抛出异常:Relay log write failure:could not queue event from master,并且Slave_IO_Running: No. 当时第一个想到的解决办法是尝试在

MySQL 主从延迟几万秒 Queueing master event to the relay log(转)

数据库版本Server version:    5.6.24-log Source distribution 问题描述 数据采集平台业务数据库由于批量灌数据导致主从延迟上万秒. 复制线程长期处于Queueing master event to the relay log状态. 监控数据显示1.Seconds_Behind_Master 维持在6w秒左右,且有上升趋势.2.主库有大量的binlog积压无法同步到从库,但主从库的网卡流量都很低远未达到瓶颈.3.从库的qps与tps很低,维持在几百左右

Slave SQL_THREAD如何重放Relay log

复制的介绍: 根据日志定义的模式不一样,可以分为:Statement(SBR)模式,Row(RBR)格式或者是MIXED格式,记录最小的单位是一个Event,binlog日志前4个字节是一个magic number,接下来19个字节记录Format desc evnet:FDE.MySQL5.6版本增加了GTID复制. 下面对三种binlog格式的优缺点: Statement(基于语句级的复制): 优点: 1)Binlog文件较小 2)日志是包含用户执行的原始SQL,方便统计和审计 3)出现最早

关于Relay Log无法自动删除的问题

本文介绍了一次运维实践中relay-log长期无法自动删除的原因和解决过程 背景: 今天在运维一个mysql实例时,发现其数据目录下的relay-log 长期没有删除,已经堆积了几十个relay-log. 然而其他作为Slave服务器实例却没有这种情况. 现象分析 通过收集到的信息,综合分析后发现relay-log无法自动删除和以下原因有关. 该实例原先是一个Slave:导致relay-log 和 relay-log.index的存在 该实例目前已经不是Slave:由于没有了IO-Thread,

Relay log read failure错误解决

1.mysql版本 5.5.24 2.ip 10.1.1.1 3.查看下slave状态 mysql> show slave status\G; *************************** 1. row ***************************                Slave_IO_State: Waiting for master to send event                   Master_Host: 10.1.1.1            

Relay log read failure

[email protected] > show slave status\G*************************** 1. row *************************** Slave_IO_State: Waiting for master to send event Master_Host: 10.38.153.53 Master_User: mysqlsync Master_Port: 3306 Connect_Retry: 60 Master_Log_Fil

解决Mysql复制Relay log read failure 的问题

一.问题描述 Mysql主从复制模式中,slave上报错 "relay log read failure",导致主从同步停止. mysql> show slave status\G *************************** 1. row *************************** Slave_IO_State: Master_Host: 10.0.0.93 Master_User: slaveuser Master_Port: 3306 Connect_

MySQL从库不能同步,报错Relay log read failure

问题:MySQL从库的数据不能同步,从库SHOW SLAVE STATUS提示如下错误: Last_SQL_Error: Relay log read failure: Could not parse relay log event entry. The possible reasons are: the master's binary log is corrupted (you can check this by running 'mysqlbinlog' on the binary log)