主从原理

1、主从复制原理

主从复制主要用途

  1. 灾备,主down机实现主从切换
  2. 从库数据备份和数据分析不影响主库性能
  3. 主从读写分离,提升tps和qps

主从复制工作原理

  • 第一部分master记录二进制日志,binlog在事务提交时写入日志。
  • 第二部分slave将master的binary log拷贝到它自己的中继日志
    1. slave开始一个工作线程——I/O线程 连接主库
    2. I/O线程在master上打开一个普通的连接,然后开始binlog dump process。
    3. Binlog dump process从master的二进制日志中读取事件,如果已经跟上master,它会睡眠并等待master产生新的事件。I/O线程将这些事件写入中继日志。
    4. SQL线程从中继日志读取事件,并重做其中的事件而更新slave的数据,使其与master中的数据一致。只要该线程与I/O线程保持一致,中继日志通常会位于OS的缓存中,所以中继日志的开销很小。

注意:

  1. 主库的dump 线程是因为从库的io 连接才起来的。
  2. 要分离看io thread和sql thread,可以关闭sql thread,io thread正常运行

主从复制主库宕机,我们需要面临的问题

  1. 到底提升谁作为主库
  2. 如何处理提升后的新主和旧主之间的日志延迟问题
    1. 补上这个日志。
    2. 旧主不可达,日志丢失,造成数据丢失【半同步复制解决这个问题】
  3. 新从指向新主,不同的从change master 到不同位置
  4. 新的从如何知道从新的主哪个位置开始索取日志
时间: 2024-10-07 03:14:19

主从原理的相关文章

Linux服务篇之七:MySQL主从原理及架构配置

Linux服务篇之七:MySQL引擎了解.主从原理及架构配置 一.MySQL引擎了解 MyISAM引擎 默认表类型,它是基于传统的ISAM类型,ISAM是IndexedSequential Access Method (有索引的顺序访问方法) 的缩写,它是存储记录和文件的标准方法.不是事务安全的,而且不支持外键,如果执行大量的select, MyISAM比较适合. InnoDB引擎 支持事务安全的引擎,支持外键.行锁.事务是他的最大特点.Innodb最初是由innobase Oy公司开发,200

mysql主从原理(异步复制)

主从复制作用:数据分布(异机或异地)---负载均衡----备份----高可用和故障转移----升级测试. 主从原理:   线程介绍: 主服务器的一个工作线程: DUMP线程,作用:接收到从库发来的请求后,负责给slave服务器发送二进制日志 从服务器的两个工作线程: I/O线程: 作用:负责读取主服务器的二进制日志,并将其保存到自己的中继日志文件中. SQL线程: 作用:来复制执行中继日志. 注意从库的IO线程和SQL线程是分开的,互不影响. 第1步: slave发送请求:(从库IO线程负责)

2015-09-16 mysql 主从原理、 同步常见异常及恢复方法

1.原理 MySQL复制技术有以下一些特点:            (1)    数据分布 (Data distribution ) (2)    负载平衡(load balancing)             (3)    备份(Backups)           (4)    高可用性和容错行 High availability and failover 整体上来说,复制有3个步骤: (1)    master将改变记录到二进制日志(binary log)中(这些记录叫做二进制日志事件,

mysql 主从原理及配置

MySQL的Replication(英文为复制)是一个多MySQL数据库做主从同步的方案,特点是异步复制,广泛用在各种对MySQL有更高性能.更高可靠性要求的场合.与之对应的是另一个同步技术是MySQL Cluster,但因为MySQL Cluster配置比较复杂,所以使用者较少. MySQL的Replication是一个异步复制的过程(mysql5.1.7以上版本分为异步复制和半同步两种模式),它是从一个Mysql instance(instance英文为实例)(我们称之为Master)复制到

MySQL主从原理及配置详解

MySQL主从配置及原理,供大家参考,具体内容如下 一.环境选择: 1.Centos 6.5 2.MySQL 5.7 二.什么是MySQL主从复制 MySQL主从复制是其最重要的功能之一.主从复制是指一台服务器充当主数据库服务器,另一台或多台服务器充当从数据库服务器,主服务器中的数据自动复制到从服务器之中.对于多级复制,数据库服务器即可充当主机,也可充当从机.MySQL主从复制的基础是主服务器对数据库修改记录二进制日志,从服务器通过主服务器的二进制日志自动执行更新. 三.MySQL主从复制的类型

Mysql主从原理

1.1 mysql主从同步 1.mysql主从同步(复制)概念 将Mysql某一台主机数据复制到其它主机(slaves)上,并重新执行一遍来实现的. 复制过程中一个服务器充当主服务器,而一个或多个其它服务器充当从服务器. 主服务器将更新写入二进制日志文件,并维护文件的一个索引以跟踪日志循环. 当一个从服务器连接主服务器时,它通知主服务器从服务器在日志中读取的最后一次成功更新的位置. 从服务器接收从那时起发生的任何更新,然后封锁并等待主服务器通知新的更新. ·binlog:**是二进制日志文件,用

Mysql主从原理和复制配置详细讲解

如果配置了多个从服务器或者多个主服务器又涉及到相应的负载均衡问题,关于负载均衡具体的技术细节还没有研究过,今天就先简单的实现一主一从的主从复制功能 将主数据库中的DDL和DML操作通过二进制日志(BINLOG)传输到从数据库上,然后将这些日志重新执行(重做):从而使得从数据库的数据与主数据库保持一致. 1.主数据库出现问题,可以切换到从数据库. 2.可以进行数据库层面的读写分离, 3.可以在从数据库上进行日常备份 Binary log:主数据库的二进制日志 Relay log:从服务器的中继日志

mysql主从原理及错误代码的原因

理论:主(A)的数据库数据有变化记录一个bin_log,再推送给从(B),B数据库的bin_log会记录去更改自己数据库(数据同步) error 1045:一般是mysql密码不匹配 error 1593:设置完从没有重启从的mysql或者各自的id相同导致 error 2013:防火墙,selinux

解读mysql主从配置及其原理分析(Master-Slave)

在windows下配置的,后面会在Linux下配置进行测试,需要配置mysql数据库同步的朋友可以参考下. 1.在主数据库服务器为从服务器添加一个拥有权限访问主库的用户:GRANT REPLICATION SLAVE ON *.* TO ' test'@'%' IDENTIFIED BY 'test'; (%表示允许所有IP,可设置指定从服务器IP)添加用户后:可在从服务器上用mysql -h127.0.0.1 -utest -ptest; 来测试是否有权限访问主数据库 2.在主据库配置文件加上