MySQL slave_exec_mode参数的作用

slave_exec_mode=IDEMPOTENT在MySQL复制环境中是个很有用的参数:只要在备机运行set global slave_exec_mode=IDEMPOTENT,备机的sql thread就运行在冥等模式下,可以让备机在insert主键、唯一键冲突,update、delete值未找到错误发生时不断开复制而保持冥等性(当即生效,连slave的sql线程都不用重启哟);而类似sql_slave_skip_counter=N和slave-skip-errors = N这样的粗暴跳过错误方法可能破坏主备一致性。

注意:使用冥等模式时表要有主键

冥等模式并不是万能的,除了不能对DDL操作冥等,对字段长度不同导致的错误也不是冥等(譬如主机一个字段是char(20)而备机是char(10)),还有一个限制就是表有主键才会对insert的冥等设置有效:因为insert的冥等行为是通过主键来判断备机是否有重复值从而产生覆写操作,如果表没有主键,则备机即使设了冥等也可能会比主机多重复数据。

针对slave_exec_mode参数,它可以跳过1062和1032的错误,并且不影响同一个事务中正常的数据执行。如果是多个SQL组成的事务,则可以跳过有问题的event。

另外在GTID模式下的复制,sql_slave_skip_counter是不支持的,该模式下的复制可以自行测试。

主从复制中常会遇到的问题就是1062主键重复

主从复制中1032错误一般是指要更改的数据不存在

遇到错误1032或者1062的处理方式:

所以处理该错误的方法有:

1:skip_slavesql_slave_skip_counter

stop slave;                                                                                                                                     Query OK, 0 rows affected (0.00 sec)

set global sql_slave_skip_counter=[1-4];

Query OK, 0 rows affected (0.00 sec)

start slave;

Query OK, 0 rows affected (0.00 sec)

2:在配置文件里指定slave-skip-errors=1062(需要重启)

这2种方法都能让复制恢复正常,但是会让主从数据不一致(谨慎使用),如果一个事务中多个语句,其他的语句也会丢失。

并且第2种方法还需要重启数据库,此时slave_exec_mode参数就派上用场了。在从库上设置该参数:

slave_exec_mode参数可用来自动处理同步复制错误:

# slave上执行

set global slave_exec_mode='IDEMPOTENT';  幂等模式 (默认是STRICT严格模式)

stop slave;

start slave;

slave_exec_mode和slave_skip_errors的作用是一样的,但是slave_skip_errors不支持动态修改,必须重启mysql才能生效,因此建议使用slave_exec_mode。

针对slave_exec_mode参数,它可以跳过1062和1032的错误,并且不影响同一个事务中正常的数据执行。如果是多个SQL组成的事务,则可以跳过有问题的event。

insert into x values(1),(4),(5); #其中从库有id=4这条记录

BEGIN;

INSERT INTO x SELECT 4;

DELETE FROM x WHERE id = 2; #从库没有这条记录

INSERT INTO x SELECT 5;

COMMIT;

#!/bin/bash

# Description: 自动跳过主从复制的错误(错误代码1023、1062) ,这个脚本在slave上执行

#

user='root'

pass='root'

port='3306'

IP='172.16.10.12'

MYSQLCLI='/usr/local/mysql/bin/mysql'

STATUS=$($MYSQLCLI -u$user -p$pass -h $IP -e 'show slave status\G'|sed -n '13p'|awk -F ":" '{print $2}')

if [[ $STATUS != 'YES' ]];then

$MYSQLCLI -u$user -p$pass -h $IP -e "SET GLOBAL slave_exec_mode='IDEMPOTENT';"

$MYSQLCLI -u$user -p$pass -h $IP -e "stop slave';"

$MYSQLCLI -u$user -p$pass -h $IP -e "start slave';"

echo -e "地址: $IP\n端口: 3306\n服务: MySQL主从复制发生错误,系统已自动跳过错误,请后续跟进处理。\n发生时间: `date +"%F %T"`" \

| mail -s '主从复制错误警告'  [email protected]

fi

参考:https://www.cnblogs.com/zhoujinyi/p/8035413.html

原文地址:http://blog.51cto.com/395469372/2092075

时间: 2024-11-09 02:34:06

MySQL slave_exec_mode参数的作用的相关文章

MySQL 的slave_exec_mode参数的用处

主从复制中常会遇到的问题就是1062主键重复.1023slave上相关记录没找到. 如果在读写分离的架构中,slave同步失败会对业务造成很大的影响的(比如用户在master上发了帖子,阅览跑到了slave上,找不到了刚才的帖子了). 因此,我们很有必要对主从复制做些监控,做些自动化的处理. 这里要涉及到MySQL的一个参数slave_exec_mode slave_exec_mode参数可用来自动处理同步复制错误: # slave上执行 > set global slave_exec_mode

mysql的jdbc.url携带allowMultiQueries=true参数的作用及其原理

如下配置 jdbc.url=jdbc:mysql://127.0.0.1:3306/chubb_2?autoReconnect=true&useUnicode=true&characterEncoding=UTF-8&allowMultiQueries=true allowMultiQueries=true参数的作用: ①可以在sql语句后携带分号,实现多语句执行. 如:mybatis的mapper.xml文件 <select id="getAll" re

php编译参数注解--不明白许多参数的作用 慎用 –with-curlwrappers参数

在Linux下安装PHP,源代码方式安装,总需要配置很多参数.这里列出常用配置参数,并详细用中文解释说明了.给大家一些参考 编译PHP的时候慎用 –with-curlwrappers参数 ./configure --prefix=/usr/local/PHP                                   php 安装目录 --with-apxs2=/usr/local/apache/bin/apxs     表示使用apache2.0以上版本,apxs表示使用的apache

mysql启动参数(/etc/my.cnf)详解汇总

在linux下面的/etc/my.cnf的参数详解汇总 MYSQL–my.cnf配置中文详解 basedir = path   使用给定目录作为根目录(安装目录). character-sets-dir = path   给出存放着字符集的目录. datadir = path   从给定目录读取数据库文件. pid-file = filename   为mysqld程序指定一个存放进程ID的文件(仅适用于UNIX/Linux系统); Init-V脚本需要使用这个文件里的进程ID结束mysqld进

MySQL缓存参数优化(转)

MySQL 数据库性能优化之缓存参数优化 数据库属于 IO 密集型的应用程序,其主要职责就是数据的管理及存储工作.而我们知道,从内存中读取一个数据库的时间是微秒级别,而从一块普通硬盘上读取一个IO是在毫秒级别,二者相差3个数量级.所以,要优化数据库,首先第一步需要优化的就是 IO,尽可能将磁盘IO转化为内存IO.本文先从 MySQL 数据库IO相关参数(缓存参数)的角度来看看可以通过哪些参数进行IO优化. query_cache_size/query_cache_type (global) Qu

MySQL 存储过程参数用法 in, out, inout

MySQL 存储过程参数有三种类型:in.out.inout.它们各有什么作用和特点呢? 一.MySQL 存储过程参数(in) MySQL 存储过程 “in” 参数:跟 C 语言的函数参数的值传递类似, MySQL 存储过程内部可能会修改此参数,但对 in 类型参数的修改,对调用者(caller)来说是不可见的(not visible). drop procedure if exists pr_param_in; create procedure pr_param_in ( in id int

MySql配置参数很全的Mysql配置参数说明

MySql配置参数 很全的Mysql配置参数说明 1. back_log 指定MySQL可能的连接数量.当MySQL主线程在很短的时间内得到非常多的连接请求,该参数就起作用,之后主线程花些时间(尽管很短)检查连接并且启动一个新线程. back_log参数的值指出在MySQL暂时停止响应新请求之前的短时间内多少个请求可以被存在堆栈中.如果系统在一个短时间内有很多连接,则需 要增大该参数的值,该参数值指定到来的TCP/IP连接的侦听队列的大小.不同的操作系统在这个队列大小上有它自己的限制.试图设定b

Class.forName(&quot;com.mysql.jdbc.Driver&quot;);的作用

对于大的项目当然我们都已经有了原有基本框架,但是对于一些新的技术探讨的时候,我们还是直接调用Class.forName("com.mysql.jdbc.Driver")连接数据库进行相关的测试 今天用HTTP大文件上传断点续传控件发布-Xproer.HttpUploader5的时候发现这有点有点忘记,所有整理一些文档进行做记录 1 public class HttpUploaderDB { 2 String m_dbDriver ="com.mysql.jdbc.Driver

slave_exec_mode参数对主从复制的影响

主从复制中常会遇到的问题就是1062主键重复.1032 slave上相关记录没找到 如果在读写分离的架构中,slave同步失败会对业务造成很大的影响的(比如主写入了一条数据,从上无法读取到这样对业务影响很大) 主从同步主要涉及一个参数: slave_exec_mode set global slave_exec_mode='IDEMPOTENT'; //幂等模式 set global slave_exec_mode='STRICT'; //严格模式 slave_exec_mode参数可用来自动处