部署MySQL主从复制与读写分离

一、实验坏境

1.一台CentOS 7作为客户端测试,对应的地址为:192.168.80.120
2.一台CentOS 7作为Amoeba前端代理服务器,对应的地址为:192.168.80.110
3.一台CentOS 7作为mysql主服务器,对应的地址为:192.168.80.100
4.两台CentOS 7分别作为mysql从服务器,对应的地址分别为:192.168.80.140,192.168.80.150
5.所有的虚拟机都绑定同一块虚拟网卡vnet1:192.168.80.10

二、主从复制和读写分离的原理

1、主从复制的原理

MySQL的主从复制和读写分离两者有着紧密的联系,首先要部署主从复制,只有主从复制完成了才能在此基础上进行数据的读写分离。

MySQL支持的复制类型有:基于语句的复制、基于行的复制、混合类型的复制。
复制的工作过程如下:

2、读写分离的原理

简单来说,读写分离就是只在主服务器上写,只在从服务器上读。基本原理是让主数据库处理事务性查询,而从服务器处理select查询。数据库复制被用来把事务性查询导致的变更同步到从数据库中。

基于中间代理层实现:代理一般位于客户端和服务器之间,代理服务器接到客户段的请求通过判断后转发到后端数据库。
读写分离的过程如下:

三、搭建MySQL主从复制

将三台CentOS 7分别用源码编译安装MySQL数据库具体操作:http://blog.51cto.com/13871362/2328667

1、配置主服务器

1)建立时间同步环境

yum install ntp -y      //安装ntp时间同步服务器

vi /etc/ntp.conf    //编辑配置文件

17行添加

restrict 192.168.80.0 mask 255.255.255.0 nomodify notrap        //限定同步的网段
server 127.127.1.0
fudge 127.127.1.0 stratum 8     //设置时间服务器的层级为8级,顶级是0


systemctl start ntp //开启服服务

2)配置主MySQL

vi /etc/my.cnf      //编辑数据库配置文件
在 [mysqld]模块下面添加以下几行
server_id = 11      //主服务器编号
log_bin=master_bin  //指定二进制日志
log_slave_updates=true      //允许从服务器更新


systemctl restart mysqld //重启服务

3)进入数据库授权

mysql -u root -pabc123      //进入数据库

GRANT REPLICATION SLAVE ON *.* TO ‘myslave‘@‘192.168.80.%‘ IDENTIFIED BY ‘abc123‘; //为所有从服务器授权所有数据库
FLUSH PRIVILEGES;       //刷新权限
show master status; //要记下 Position 列的值 (我的是603)

2、配置从服务器(两台从步骤一样,区别server-id不同)

1)配置从MySQL

vi /etc/my.cnf      //编辑数据库配置文件
在 [mysqld]模块下面添加以下几行
server_id = 22      //从服务器编号
relay_log=relay-log-bin //指定从服务器的中继日志
relay_log_index=slave-relay-bin.index   //定义中级日志的位置和名称


systemctl restart mysqld //重启服务

2)在从服务器上进行时间同步

yum install ntpdate -y  //安装时间同步工具
ntpdate 192.168.80.100      //与主服务器时间同步

echo ‘*/30 * * * * /usr/sbin/ntpdate 192.168.80.183‘ >> /var/spool/cron/root
crontab -l      //创建计划任务每隔三十秒同步一次

3)进入从数据库授权

mysql -uroot -pabc123   //进入数据库

change master to master_host=‘192.168.80.100‘,master_user=‘mysyslave‘,master_password=‘abc123‘,master_log_file=‘master_bin.000001‘‘,master_log_pos=603;     //指定主服务器

start slave;    //开启从服务器
show slave status \G 

3、验证主从复制

进入主服务器数据库

mysql -u root -p123456
create database test;   //建库测试

在两台从服务器上验证
show databases;

四、搭建MySQL读写分离

1、配置前端代理服务器

1) 安装JDK环境(amoeba基于jdk开发的)

tar xf jdk-8u144-linux-x64.tar.gz   //解压jdk安装包
cp -rv jdk1.8.0_144/ /usr/local/java

vi /etc/profile

添加Java环境

export JAVA_HOME=/usr/local/java
export JRE_HOME=/usr/local/java/jre
export PATH=$PATH:/usr/local/java/bin
export CLASSPATH=./:/usr/local/java/lib:/usr/local/java/jre/lib

source /etc/profile     //刷新环境
java -version   //验证jdk环境

2)安装Amoeba

unzip amoeba-mysql-3.0.5-RC-distribution.zip -d /usr/local/ //解压软件包

mv /usr/local/amoeba-mysql-3.0.5-RC/ /usr/local/amoeba      //更改软件位置
chmod -R 755 /usr/local/amoeba/     //提权

vi /usr/local/amoeba/jvm.properties //编辑jvm配置文件优化
32行下注释新增:#JVM_OPTIONS="-server -Xms256m -Xmx1024m -Xss196k -XX:PermSize=16m -XX:MaxPermSize=96m"
JVM_OPTIONS="-server -Xms1024m -Xmx1024m -Xss256k"

3)制作amoeba启动脚本

vi /etc/init.d/amoeba
#!/bin/bash
#chkconfig: 35 62 62
#
export JAVA_HOME=/usr/local/java
export PATH=$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$PATH
NAME=Amoeba
AMOEBA_BIN=/usr/local/amoeba/bin/launcher
SHUTDOWN_BIN=/usr/local/amoeba/bin/shutdown
PIDFILE=/usr/local/amoeba/Amoeba-MySQL.pid
SCRIPTNAME=/etc/init.d/amoeba

case "$1" in
start)
echo -n "Starting $NAME... "
$AMOEBA_BIN
echo " done"
;;
stop)
echo -n "Stoping $NAME... "
$SHUTDOWN_BIN
echo " done"
;;
restart)
$SHUTDOWN_BIN
sleep 1
$AMOEBA_BIN
;;
*)
echo "Usage: $SCRIPTNAME {start|stop|restart}"
exit 1
;;
esac

chmod +x /etc/init.d/amoeba     //将amoeba启动脚本提权
chkconfig --add amoeba      //加入系统配置中

service amoeba start    //出现下面的端口说明启动成功,直接ctrl+C退出


netstat -anpt | grep 8066 //默认监听在8066端口

4)与客户端对接
vi /usr/local/amoeba/conf/amoeba.xml
28-30行

83行

5)与后端服务器对接
vi /usr/local/amoeba/conf/dbServers.xml
26-29行

43-56行

65-73行

service restart amoeba //服务重启

6)在三台mysql数据库中(一主两从)为amoeba授权

GRANT ALL  ON *.* TO [email protected]‘192.168.80.%‘ IDENTIFIED BY ‘123.com‘;   //为代理授权链接
FLUSH PRIVILEGES;       //刷新权限

2、配置客户端

yum install -y mysql        // 安装mysql客户端
mysql -u amoeba -p123456 -h 192.168.80.110 -P8066       //用代理地址登录数据库

3、测试读写分离

1) 在MASTER上新建的数据库或者里面的表,两台从服务器会同步

use test;
create table zhang (id int(10),name varchar(10),address varchar(20));
show tables; //三台数据库服务器上查看会是相同结果

2)在两台从服务器上停止从服务后
stop slave;
在主主服务器插入内容

use test
insert into zhang values(‘1‘,‘hahahha‘,‘this_is_master‘);

在从服务器1上出入内容

use test;
insert into zhang values(‘2‘,‘zhang‘,‘this_is_slave1‘);

在从服务器2上出入内容

use test;
insert into zhang values(‘3‘,‘zhang‘,‘this_is_slave2‘);

3)在客户端上面测试从服务器只读数据
Select * from test.zhang;

4)在客户端上面测试主服务器只写数据
insert into zhang values(‘4‘,‘zhang‘,‘write_test‘);
在客户端查看
select * from zhang;

在主服务器查看

在从服务1上查看

在从服务器2上查看

4、结论

以上实验在主从同步的基础上验证了MySQLd的读写分离,而Amoeba充当代理服务器,负责将客户的请求进行转发,分配到相应的服务器,也验证的原理。

原文地址:http://blog.51cto.com/13871362/2331275

时间: 2024-08-07 00:11:59

部署MySQL主从复制与读写分离的相关文章

mysql主从复制与读写分离

MySQL主从复制与读写分离 MySQL主从复制(Master-Slave)与读写分离(MySQL-Proxy)实践 Mysql作为目前世界上使用最广泛的免费数据库,相信所有从事系统运维的工程师都一定接触过.但在实际的生产环境中,由单台Mysql作为独立的数据库是完全不能满足实际需求的,无论是在安全性,高可用性以及高并发等各个方面. 因此,一般来说都是通过 主从复制(Master-Slave)的方式来同步数据,再通过读写分离(MySQL-Proxy)来提升数据库的并发负载能力 这样的方案来进行部

MySQL主从复制、读写分离、高可用集群搭建

MySQL主从复制.读写分离.高可用集群搭建  一.服务介绍   1.1 Keepalived     Keepalived,见名知意,即保持存活,其目的是解决单点故障,当一台服务器宕机或者故障时自动切换到其他的服务器中.Keepalived是基于VRRP协议实现的.VRRP协议是用于实现路由器冗余的协议,VRRP协议将两台或多台路由器设备虚拟成虚拟设备,可以对外提供虚拟路由器IP(一个或多个),即漂移IP(VIP). 1.2 ProxySQL ProxySQL是一个高性能,高可用性的MySQL

搭建 MySQL主从复制与读写分离

搭建 MySQL主从复制与读写分离 案例概述 : 在实际环境中 ,如果对数据库的读和写都在同一个数据库服务中操作 ,无论实在安全性.高可用性, 还是高并发等各个方面都是完全不能满足实际需求的 ,因此 ,一般来说都只通过主从复制的方式来同 步数据 ,在通过读写分离来提升数据库的并发负载能力 ,这样的方案来进行部署与实施 . 环境拓补图 : 本案环境 : 主机 操作系统 IP地 址 主要软件 主服务器 CentOS 7.3 x86_64 192.168.217.130 NTP 从服务器1 CentO

MySQL 主从复制与读写分离

Mysql主从复制作用原理 1.在业务复杂的系统中,有这么一个情景,有一句sql语句需要锁表,导致暂时不能使用读的服务,那么就很影响运行中的业务,使用主从复制,让主库负责写,从库负责读,这样,即使主库出现了锁表的情景,通过读从库也可以保证业务的正常运作.2.做数据的热备3.架构的扩展.业务量越来越大,I/O访问频率过高,单机无法满足,此时做多库的存储,降低磁盘I/O访问的频率,提高单个机器的I/O性能.mysql主从复制是一个异步的复制过程,主库发送更新事件到从库,从库读取更新记录,并执行更新记

Mysql 主从复制,读写分离

Mysql 主从复制及读写分离 特别推荐看:amoeba.xml 的配置部分,在百度上看了很多配置都不完整,是我测试时的痛点 实验的目的: 有两部分:第一实现Mysql主从复制,第二实现读写分离. 下面是实验的环境: 192.168.58.11     安装了amoeba 的节点 192.168.58.16      master    系统:rhel 5.4 192.168.58.12      slave     系统: rhel 5.4 192.168.58.11      代理     

Mysql主从复制、读写分离工作原理+配置

Mysql的 Replication 是一个异步的复制过程,从一个 Mysql instace(我们称之为 Master)复制到另一个 Mysqlinstance(我们称之 Slave).在 Master 与 Slave 之间的实现整个复制过程主要由三个线程来完成,其中两个线程(Sql线程和IO线程)在 Slave 端,另外一个线程(IO线程)在 Master 端. MySQL 复制的基本过程如下: 1. Slave 上面的IO线程连接上 Master,并请求从指定日志文件的指定位置(或者从最开

重新学习Mysql数据13:Mysql主从复制,读写分离,分表分库策略与实践

一.MySQL扩展具体的实现方式 随着业务规模的不断扩大,需要选择合适的方案去应对数据规模的增长,以应对逐渐增长的访问压力和数据量. 关于数据库的扩展主要包括:业务拆分.主从复制.读写分离.数据库分库与分表等.这篇文章主要讲述数据库分库与分表 (1)业务拆分 在?大型网站应用之海量数据和高并发解决方案总结一二?一篇文章中也具体讲述了为什么要对业务进行拆分. 业务起步初始,为了加快应用上线和快速迭代,很多应用都采用集中式的架构.随着业务系统的扩大,系统变得越来越复杂,越来越难以维护,开发效率变得越

Amoeba搭建高可用Mysql集群(实现Mysql主从复制、读写分离、负载均衡)

Amoeba是什么? Amoeba(变形虫)项目,该开源框架于2008年 开始发布一款 Amoeba for Mysql软件.这个软件致力于MySQL的分布式数据库前端代理层,它主要在应用层访问MySQL的时候充当SQL路由功能,专注于分布式数据库代理层(Database Proxy)开发,它位于与Client.DBServer(s)之间,对客户端透明.具有 负载均衡.高可用性.SQL过滤.读写分离.可路由相关的到目标数据库.可并发请求多台数据库合并结果 . 通过Amoeba你能够完成多数据源的

mysql主从复制以及读写分离

mysql的主从复制以及读写分离 前言:我们前面搭建过LAMP和LNMP,做过了web服务器群集和热备,web服务器坏了我们是不怕了,但是我们要知道,网站的数据有很多是存储在数据库里面的,例如注册的会员,发的文章,购物的订单等信息.当然我们可以给数据库做备份,但是如果每天00:00做一次备份,那么如果在23:59数据丢失了,那么就会丢失一天的数据,有没有一种方法能实现实时备份,就是说有数据产生就立即备份,答案当然是有,也就是今天我们要学习的mysql主从复制.有点类似于前面我们学习过的rsync