MySql日志binlog介绍

????MySql在运行的过程中会产生一些日志,而现在对于主从数据的一致性同步问题,以及数据库恢复,数据库优化,数据库异常排查等动作都是同基于MySql的产生的日志来实现的。

  • MySql日志种类

    • 错误日志:记录MySql运行过程中异常信息等。
    • 一般查询日志:记录 MySql正在做的事情,比如客户端的连接和断开、来自客户端每条 Sql Statement 记录信息等
    • 慢语句日志:记录一些查询比较慢的 SQL 语句,当我们发现系统运行比较慢的时候可以开启它,然后找到慢语句进行数据库调优等
    • binlog日志:记录包含了一些事件,这些事件描述了数据库的改动,如建表、数据改动等。

????接下来主要介绍的是binlog日志,该日志主要应用场景是主从数据库的同步以及数据恢复两大类问题。

binlog简介

  • 开启binlog日志记录,需要在MySql的配置文件my.ini中加入配置:
log-bin=master-bin #日志文件前缀,比如master-bin.000001
log-bin-index=master-bin.index #记录日志文件的名称,内容为上面定义的日志文件名称
binlog-format=ROW #binlog日志的记录模式或者格式
  • 重启MySql数据库服务,并且通过下面命令查询是否开启binlog:
show variables like 'log_%';
Variable_name Value
log_slow_queries ON
  • binlog日志文件生成:日志文件以配置中的前缀开头,然后依次往后递加,比如从master-bin.000001到master-bin.00000n。

    • MySql服务器停止或重启时,MySql会在重启时生成一个新的日志文件。
    • 使用flush logs命令。另外可以使用reset master命令清空binlog日志。
    • 当binlog文件大小超过max_binlog_size系统变量配置的上限时。
  • binlog日志格式分类:
    • Statement:基于语句模式,每一条会修改数据的sql都会记录在binlog中。
      优点:不需要记录每一行的变化,减少了binlog日志量,节约了IO, 提高了性能。
      缺点:由于记录的只是执行语句,为了这些语句能在slave上正确运行,因此还必须记录每条语句在执行的时候的一些相关信息,以保证所有语句能在slave得到和在master端执行的时候相同的结果。
    • Row:基于行模式,它不记录sql语句上下文相关信息,仅保存哪条记录被修改。
      优点: binlog中可以不记录执行的sql语句的上下文相关的信息,仅需要记录那一条记录被修改成什么了。所以row的日志内容会非常清楚的记录下每一行数据修改的细节。而且不会出现某些特定情况下的存储过程,或function,以及trigger的调用和触发无法被正确复制的问题.
      缺点:所有的执行的语句当记录到日志中的时候,都将以每行记录的修改来记录,这样可能会产生大量的日志内容。
    • Mixed:混个模式,实际上就是Statement与Row的结合。
      在Mixed模式下,一般的语句修改使用statment格式保存binlog,如一些函数,statement无法完成主从复制的操作,则采用row格式保存binlog,MySql会根据执行的每一条具体的sql语句来区分对待记录的日志形式,也就是在Statement和Row之间选择一种。
  • 通过以下一些命令查看binlog日志格式:
SHOW VARIABLES LIKE 'binlog_format';
Variable_name Value
binlog_format ROW
  • 通过以下命令查询所有的binlog日志文件
SHOW BINARY LOGS;
Log_name File_size
master-bin.000001 392
master-bin.000002 126
master-bin.000003 324
  • 通过以下命令查看某个具体的binlog日志文件:(文件是二进制字节,只能通过MySql的工具打开)
SHOW BINLOG EVENTS IN 'master-bin.000001';
#PURGE MASTER LOGS TO 'master-bin.000001'; #该条语句删除具体的某个日志文件

这是Statement模式的日志,主要记录是向t_user中加入一条数据

Log_name Pos Event_type Server_id End_log_pos Info
master-bin.000001 4 Format_desc 1 107 Server ver: 5.5.41-enterprise-commercial-advanced-log, Binlog ver: 4
master-bin.000001 107 Query 1 181 BEGIN
master-bin.000001 181 Intvar 1 209 INSERT_ID=2
master-bin.000001 209 Query 1 346 use demobinlog; insert into t_user(name,age,isman,remark) values(‘hhh’,12,1,’kkkkk’)
master-bin.000001 346 Xid 1 373 COMMIT /* xid=16 */
master-bin.000001 373 Stop 1 392 ?

这是Row模式的日志,同样是向t_user中添加一行数据

Log_name Pos Event_type Server_id End_log_pos Info
master-bin.000003 4 Format_desc 1 107 Server ver: 5.5.41-enterprise-commercial-advanced-log, Binlog ver: 4
master-bin.000003 107 Query 1 181 BEGIN
master-bin.000003 181 Table_map 1 240 table_id: 33 (demobinlog.t_user)
master-bin.000003 240 Write_rows 1 297 table_id: 33 flags: STMT_END_F
master-bin.000003 297 Xid 1 324 COMMIT /* xid=7 */

????以上只是简单介绍MySql的binlog日志的产生以及查看等待,对于binlog日志内容中更详细的介绍将在以后的博客中详细介绍。

原文:大专栏  MySql日志binlog介绍

原文地址:https://www.cnblogs.com/chinatrump/p/11601714.html

时间: 2024-09-30 06:00:53

MySql日志binlog介绍的相关文章

MySQL日志binlog的三种模式

1        三种模式的介绍 二进制日志binlog作用: 1.以二进制形式记录更改数据库的SQL语句(insert,update,delete,create,drop,alter等) 2.用于Mysql主从复制 3.增量数据库备份及恢复 1.1  Row模式 日志会记录成每一行数据被修改成的形式,然后再slave端再对相同的数据进行修改,只记录要修改的数据,只有value,不会有sql多表关联的情况. 优点:在row模式下,bin-log中可以不记录执行的sql语句的上下文相关信息,仅仅需

MySQL 的 binlog 日志

binlog 基本认识 MySQL的二进制日志可以说是MySQL最重要的日志了,它记录了所有的DDL和DML(除了数据查询语句)语句,以事件形式记录,还包含语句所执行的消耗的时间,MySQL的二进制日志是事务安全型的. 一般来说开启二进制日志大概会有1%的性能损耗(参见MySQL官方中文手册 5.1.24版).二进制有两个最重要的使用场景: 其一:MySQL Replication在Master端开启binlog,Mster把它的二进制日志传递给slaves来达到master-slave数据一致

MySQL的binlog日志<转>

binlog 基本认识 MySQL的二进制日志可以说是MySQL最重要的日志了,它记录了所有的DDL和DML(除了数据查询语句)语句,以事件形式记录,还包含语句所执行的消耗的时间,MySQL的二进制日志是事务安全型的. 一般来说开启二进制日志大概会有1%的性能损耗(参见MySQL官方中文手册 5.1.24版).二进制有两个最重要的使用场景: 其一:MySQL Replication在Master端开启binlog,Mster把它的二进制日志传递给slaves来达到master-slave数据一致

Mysql之binlog日志说明及利用binlog日志恢复数据操作记录

众所周知,binlog日志对于mysql数据库来说是十分重要的.在数据丢失的紧急情况下,我们往往会想到用binlog日志功能进行数据恢复(定时全备份+binlog日志恢复增量数据部分),化险为夷! 废话不多说,下面是梳理的binlog日志操作解说: 一.初步了解binlogMySQL的二进制日志binlog可以说是MySQL最重要的日志,它记录了所有的DDL和DML语句(除了数据查询语句select),以事件形式记录,还包含语句所执行的消耗的时间,MySQL的二进制日志是事务安全型的. DDL-

mysql日志文件开启及详解:General_log 和 Binlog

使用记录: SHOW VARIABLES LIKE "general_log%"; SET GLOBAL general_log = 'ON'; SET GLOBAL general_log_file = 'd:\mysql.log'; General_log 详解 1.介绍 开启 general log 将所有到达MySQL Server的SQL语句记录下来. 一般不会开启开功能,因为log的量会非常庞大.但个别情况下可能会临时的开一会儿general log以供排障使用. 相关参数

mysql dba系统学习(6)二进制日志binlog之二

MySQL 5.5 中对于二进制日志 (binlog) 有 3 种不同的格式可选:Mixed,Statement,Row,默认格式是 Statement.总结一下这三种格式日志的优缺点. MySQL Replication 复制可以是基于一条语句 (Statement Level) ,也可以是基于一条记录 (Row Level),可以在 MySQL 的配置参数中设定这个复制级别,不同复制级别的设置会影响到 Master 端的 bin-log 日志格式. 1. Row日志中会记录成每一行数据被修改

mysql通过binlog日志来恢复数据

简介 在生产的过程中有这么一个业务场景:比如我在2016-11-19 09:30:00 通过mysqldump的方式备份了数据库,但是在2016-11-19 10:30:00的时候数据库崩溃了,如果通过我们的备份文件来恢复,也只能恢复到 2016-11-19 09:30:00 这个时间点,而9.30分到10:30分这一个小时的数据恢复不了,这时候我们可以通过mysql的binlog日志来恢复没有备份到的这一小时的数据. 1.开启mysql的binlog日志(默认情况下没有开启) #vim /et

MySQL抑制binlog日志中的BINLOG部分

MySQL通过binlog来记录整个数据的变更过程,因此我们只要有MySQL的binlog日志即可完整的还原数据库.MySQL binlog日志记录有3种不同的方式,即:STATEMENT,MIXED,ROW.对于不同的日志模式,生成的binlog有不同的记录方式.对于MIXED(部分SQL语句)和ROW模式是以base-64方式记录,会以BINLOG开头,是一段伪SQL,我们可以用使用base64-output参数来抑制其显示.本文对此给出了描述及演示. 有关mysqlbinlog的用法,请参

Mysql的二进制日志---binlog

二进制日志(BINLOG)记录了所有的DDL(数据定义语言)语句和DML(数据操纵语言)语句,但是不包括数据查询语句.语句以"事件"的形式保存,它描述了数据的更改过程.此日志对于灾难时的数据恢复起着极其重要的作用. 1.日志的位置和格式 当用--log-bin[=file_name]选项启动时,mysqld将包含所有更新数据的SQL命令写入日志文件.如果没有给出file_name值,默认名为主机名后面跟"-bin".如果给出了文件名,但没有包含路径,则文件默认被写入