6\MySQL 主从同步 、 MySQL 读写分离 、 MySQL 性能调优

day06
一、mysql主从同步
二、数据读写分离
三、MySQL优化
++++++++++++++++++++++++++++++++
一、mysql主从同步
1.1 主从同步介绍？从库服务器自动同步主库上数据（被客户端访问的数据库服务器做主库服务器）
1.2 结构

              54                 55

systemctl start mysqld systemctl start mysqld
主master数据库服务器 从slave数据库服务器

1.3 配置主从同步结构？
1.3.1主库角色主机的配置
1 用户授权
mysql> grant replication slave on . to [email protected]"192.168.4.55" identified by "123456";

2 启用binlog日志
10 vim /etc/my.cnf
server_id=54
log-bin=master54
binlog-format="mixed"
：wq
3 重启数据库服务器
11 systemctl stop mysqld
12 systemctl start mysqld
13 ls /var/lib/mysql/master54.*

4 查看正在使用binlog日志文件。

mysql -uroot -p123456

mysql> show master status;

1.3.2从库角色主机的配置？
1 显示自己是否是从数据库服务器
mysql> show slave status;

2 测试主库授权的用户是否有效
#mysql -h192.168.4.54 -uyaya -p123456
mysql> show grants;
mysql> quit

3 修改配置文件指定server_id
#vim /etc/my.cnf
[mysqld]
server_id=55
:wq
#systemctl restart mysqld

4 在本机数据管理员登录指定主库信息。
mysql> change master to
-> master_host="192.168.4.54",
-> master_user="yaya",
-> master_password="123456",
-> master_log_file="master54.000001",
-> master_log_pos=154;
Query OK, 0 rows affected, 2 warnings (0.35 sec)
mysql> start slave;
mysql> show slave status\G;
Slave_IO_Running: Yes
Slave_SQL_Running: Yes

验证主从同步配置：结果
客户端连接主库服务器 产生的新数据，在从角色的主机上都能够查看到。

+++++++++++++++++++++++++++++++
主从工作原理？
IO线程： 把master 库的 binlog日志内容 记录到本机的relay-binlog日志里。

SQL线程：执行本机relay-binlog日志里的sql命令 把数据写进本机的库。

从角色主机的数据库目录下会多出如下文件：
master.info 存储主数据库的信息
slave55-relay-bin.XXXXXX
中继日志文件 记录本机产生新数据的sql命令
slave55-relay-bin.index 中继日志文件索引文件
relay-log.info 记录当前数据库服务器使用的中继日志文件

主从同步配置排错？
IO线程报错： 从库指定主库的信息错误；
安全限制（firewall selinux）

查看报错信息：
Last_IO_Error: 报错信息

mysql> stop slave;
mysql> change mstart to 选项=值；
mysql> start slave;

SQL线程报错： 执行中继日志里的sql命令时，命令操作的库或表在本机不存在。

查看报错信息：
Last_SQL_Error: 报错信息
mysql> stop slave;
在从本机有命令操作的库或表
mysql> start slave;

++++++++++++++++++++++++++++
让从数据库临时不同步主库的数据？
mysql> stop slave;

把从库 还原成独立的数据库服务器？
#rm -rf master.info slave55-relay-bin.* relay-log.info
#systemctl restart mysqld

mysql> show slave status;

主从同步结构模式？
一主一从
一主多从
主从从
互为主从（主主结构）

reset master #清空主的日志
reset slave #只清空日志
reset slave all #需要重新配置change master

++++++++++++++++++++++++++++++++++++
主从同步常用配置参数？（/etc/my.cnf）
主库角色主机的配置参数
[mysqld]
binlog_do_db=数据库名，数据库名 #只允许同步的库binlog_ignore_db=数据库名，数据库名 #只不允许同步的库

mysql> show master stauts;

从库角色主机的配置参数
[mysqld]
log_slave_updates 级联复制
replicate_do_db=数据库名，数据库名 #只同步的库
replicate_ignore_db=数据库名，数据库名 #只不同步的库relay_log=文件名 #设置中继日志文件名称
+++++++++++++++++++++++++++++
二、数据读写分离
2.1 读写分离介绍？把客户的查询记录的操作和写数据的操作在不同的数据库服务器上执行。

2.2 为什么要做读写分离？ 减轻单台数据库服务器的并发访问压力和提供服务器硬件资源的利用率

2.3 配置数据读写分离 （Maxscale + 主从同步结构）

2.3.1 拓扑结构
client
|
53 maxscale 4010 管理端口 4006 读写分离端口

insert select
写 查
54 55
主 从

2.3.2 配置MySQL一主一从同步结构
2.3.3 配置maxscale (53)
a. 装包
b. 修改配置文件
vim /etc/maxscale.cnf
9 [maxscale]
10 threads=1

18 [server1]
19 type=server
20 address=192.168.4.54
21 port=3306
22 protocol=MySQLBackend
23

25 [server2]
26 type=server
27 address=192.168.4.55
28 port=3306
29 protocol=MySQLBackend

38 [MySQL Monitor]
39 type=monitor
40 module=mysqlmon
41 servers=server1, server2
42 user=scalemon # 监控数据库服务服务的运行状态和主从状态
43 passwd=123456
44 monitor_interval=10000

66 [Read-Write Service]
67 type=service
68 router=readwritesplit
69 servers=server1, server2
70 user=maxscale #检查接收客户端连接请求时，连接的用户名和密码在数据库服务器上是否存在
71 passwd=123456
72 max_slave_connections=100%

78 [MaxAdmin Service]
79 type=service
80 router=cli

94 [Read-Write Listener]
95 type=listener
96 service=Read-Write Service
97 protocol=MySQLClient
98 port=4006

100 [MaxAdmin Listener]
101 type=listener
102 service=MaxAdmin Service
103 protocol=maxscaled
104 socket=default
105 port=4010

根据配置文件的设置在数据库服务器上添加对应的授权用户。
mysql> grant replication slave, replication client on . to [email protected]‘%‘ identified by

"123456";

mysql> grant select on mysql.* to [email protected]‘%‘ identified by "123456";

c. 启动服务

systemctl stop mysqld

[[email protected] ~]# maxscale -f /etc/maxscale.cnf
[[email protected] ~]# netstat -utnalp | grep :4010
tcp6 0 0 :::4010 ::: LISTEN 9559/maxscale
[[email protected] ~]#
[[email protected] ~]# netstat -utnalp | grep :4006
tcp6 0 0 :::4006 ::: LISTEN 9559/maxscale
[[email protected] ~]# netstat -utnalp | grep maxscle
[[email protected] ~]# netstat -utnalp | grep maxscale
tcp 0 0 192.168.4.53:52855 192.168.4.55:3306 ESTABLISHED 9559/maxscale
tcp 0 0 192.168.4.53:52228 192.168.4.54:3306 ESTABLISHED 9559/maxscale
tcp6 0 0 :::4010 ::: LISTEN 9559/maxscale
tcp6 0 0 :::4006 ::: LISTEN 9559/maxscale
[[email protected] ~]#
53访问本机的管理服务 查看监控主机的状态
[[email protected] ~]# maxadmin -P4010 -uadmin -pmariadb
MaxScale>list servers

停止maxscale 服务
#ps -C maxscale
#kill -9 pid号

d. 在客户端测试配置
#ping -c 2 192.168.4.53

d.1 在数据库服务器添加访问数据的用户
mysql> grant all on . to [email protected]‘%‘ identified by "123456";

d.2 访问代理主机
#mysql -P4006 -h192.168.4.53 -ustudent -p123456

+++++++++++++++++++++++++++++++++++++
三、MySQL优化(优化思路、 优化什么 、怎么优化)
访问数据时，出结果特别慢。分析可能是由哪些原因导致的。

1 硬件配置低：查看应用设备的使用率CPU 内存 存储(硬盘)
top 0.0 wa
sar
uptime I/O

                    free  -m

2 网络带宽： 使用网络测速软件 网速

3 提供数据库服务软件版本低：
查看数据库服务运行时的运行参数配置（常用配置参数）

超时时间
connect_timeout
建立连接时，三次握手的超时时间
wait_timeout 建立连接后，等待断开连接的超时时间

mysql> show variables like "connect_timeout";
mysql> show variables like "wait_timeout";

允许重复使用的线程的数量
mysql> show variables like "thread_cache_size";

为所有线程缓存打开表的数量。
table_open_cache=2000
mysql> show variables like "table_open_cache";
pc1 T1

pc2 t3 mysqld

pc3 T1

key_buffer-size
sort_buffer_size
read_buffer_sizeread_rnd_buffer_sizename Index
select name from user where name="zhangsan";
select name,uid from user order by uid desc; <----mysqld
select * from user; <------ mysqld
select shell from user group by shell;<------ mysqld

查询缓存相关参数设置？
MySQL> show variables like "query_cache%";

查询缓存写锁有效 存储引擎（MYISAM）
query_cache_wlock_invalidate | OFF

       t1

pc1 select name from user where name="lucy";
name="lucy" ------> 查询缓存

pc2 select name from user where name="lucy";--> 查询缓存
name="lucy"

pc3 update user set name="lili" where name="lucy";

query_cache_type 0|1|2
0 关闭 不存储
1 开启 无条件存储
2 开启 指定存储才存储

query_cache_limit 1048576 超过1M此数不存
query_cache_min_res_unit 4096 最小存储单元4k

查询查询缓存统计信息？
MySQL> show global status like "qcache%";
Qcache_hits 0
Qcache_inserts 0
Qcache_lowmem_prunes 0

并发连接数：
mysql> show variables like "max_connections";

曾经有过的最大连接数
mysql> show global status like "Max_used_connections";

公式：
曾经有过的最大连接数/并发连接数=0.85 * 100% = 85%
3000/ X = 0.85

查看参数的值
MySQL> show variables like "%关键字%";
mysql> show variables like "%password%";
mysql> show variables like "old_passwords";

临时定义 mysql> set [global] 变量名=值；

永久定义
vim /etc/my.cnf
[mysqld]
变量名=值
....
:wq
#systemctl restart mysqld

mysql体系结构？
连接池
sql接口
分析器
优化器
查询缓存
存储引擎
文件系统
管理工具

MySQL服务处理查询请求的过程？

4 程序编写的查询数据库的sql查询命令不合理 ，导致数据库处理慢
在数据库服务器上启用"慢查询日志"：记录超过指定时间显示查询结果的sql命令.（忍受值3秒）

5 数据存储架构设置有数据传输瓶颈。

原文地址：http://blog.51cto.com/13478354/2065212

时间： 2024-10-21 00:48:37

6\MySQL 主从同步 、 MySQL 读写分离 、 MySQL 性能调优的相关文章

MySQL主从同步、读写分离配置步骤

现在使用的两台服务器已经安装了MySQL,全是rpm包装的,能正常使用. 为了避免不必要的麻烦,主从服务器MySQL版本尽量保持一致; 环境:192.168.0.1 (Master) 192.168.0.2 (Slave) MySQL Version:Ver 14.14 Distrib 5.1.48, for pc-linux-gnu (i686) using readline 5.1 1.登录Master服务器,修改my.cnf,添加如下内容: server-id = 1 //数据库ID号,

MySQL主从同步、读写分离配置步骤、问题解决笔记

根据要求配置MySQL主从备份.读写分离,结合网上的文档,对搭建的步骤和出现的问题以及解决的过程做了如下笔记:       现在使用的两台服务器已经安装了MySQL,全是rpm包装的,能正常使用.       为了避免不必要的麻烦,主从服务器MySQL版本尽量保持一致; 环境:192.168.0.1 (Master)           192.168.0.2 (Slave) MySQL Version:Ver 14.14 Distrib 5.1.48, for pc-linux-gnu (i6

【纯干货】Amoeba实现MySQL主从同步与读写分离

[纯干货]Amoeba实现MySQL主从同步与读写分离 一.简介 amoeba简介 Amoeba(变形虫)项目,该开源框架于2008年开始发布一款 Amoeba for Mysql软件.这个软件致力于MySQL的分布式数据库前端代理层,它主要在应用层访问MySQL的 时候充当SQL路由功能,专注于分布式数据库代理层(Database Proxy)开发.座落与 Client.DB Server(s)之间,对客户端透明.具有负载均衡.高可用性.SQL 过滤.读写分离.可路由相关的到目标数据库.可并发

mysql主从同步、读写分离

一:所需服务器 服务器名称 运行服务 服务端口 Ip地址 T1 Nginx 80 192.168.11.158 负载均衡 T2 Nginx/httpd 80,873 192.168.11.157 实际网站服务 T3 Nginx/httpd 80,873 192.168.11.161 实际网站服务 T4 Nginx/httpd 80,873 192.168.11.162 实际网站服务 T5 Mysql 8066 192.168.11.163 Mysql读写分离 T6 mysql 3306 192.

MySQL主从同步与读写分离

MySQL主从同步MySQL AB复制1.对指定库的异地同步.2.MySQL主-->从复制架构的实现.3.MySQL服务器的只读控制. 主从:单向复制时,建议将从库设置为只读. 主从复制的原理:Master,记录数据更改操作.-启动binlog日志-设置binlog日志格式-设置server_id Slave,运行2个线程.-Slave_IO:复制master主机binlog日志文件里的SQL到本机的relay-log文件里.-Slave_SQL:执行本机relay-log文件里的SQL语句,重

CentOS 7上部署Amoeba实现MySQL主从同步，读写分离，负载均衡高可用群集

实验描述 本实验需要四台主机安装mysql,一台部署Amoeba,一台主数据库服务器,两台从数据库服务器,还需一台主机做客户端访问测试,本实验结束可实现主数据库服务器与从数据库服务器之间数据同步,读写分离(客户机读从服务器的数据,写入的数据存储在主服务器,主服务器再同步给从服务器),负载均衡. 实验拓扑 实验环境 实验步骤 一.Master同步时间 1.Master安装ntp yum install ntp -y 2.修改ntp配置文件 vim /etc/ntp.conf #空白处插入如下内容

mysql主从同步+mycat读写分离+.NET程序连接mycat代理

背景 最近新项目需要用到mysql数据库,并且由于数据量大的原因,故打算采用1主1从(主数据库负责增.删.改操作:从数据库负责查操作)的数据库架构,在实现主从之后还要实现读写分离的代理,在网上搜寻了很久,自己也了解了一些资料,目前有三种代理组件:1.mysql_proxy   2.amoeba   3.mycat   我采用了第3种,选择mycat的原因下面会提到. 部署环境 我在我虚拟机下面装了三台Centos7_x64系统: 1.192.168.8.47 主mysql服务器 2.192.16

DBA成长之路---mysql主从同步，读写分离

主从同步 什么是主从同步: 让其他的数据库服务器自动同步正在提供服务的数据库服务器上 的数据. 1 添加授权用户 mysql> grant replication slave on *.* to [email protected]"192.168.4.4" identified by '123456'; 2启用binlog日志 [[email protected] ~]# vim /etc/my.cnf [mysqld] server_id=3 log-bin=master11

Linux—Centos7.4之搭建Mysql数据库主从同步、读写分离

MySQL主从同步与读写分离 目录第一部分 实验环境第二部分 配置主从同步第三部分 配置读写分离第四部分 测试验证 第一部分 实验环境 实验拓扑图: 服务器五台:1)客户端服务器一台:IP地址:192.168.80.10(client)需安装软件:mysql-boost-5.7.20.tar.gz 2)Amoeba调度服务器一台:IP地址:192.168.80.20(amoeba)需安装软件:jdk-8u144-linux-x64.tar.gzamoeba-mysql-3.0.5-RC-dist

mariadb的主从同步和读写分离

前言 MariaDB数据库管理系统是MySQL的一个分支,主要由开源社区在维护,采用GPL授权许可 MariaDB的目的是完全兼容MySQL,包括API和命令行,使之能轻松成为MySQL的代替品.前提两台服务器,今天就要用它来搭建多服务器的主从同步和读写分离, 两台服务的环境是:192.168.47.128 centos7 mariadb10.3192.168.47.129 centos6.5 mariadb10.3下面开始搭建: mariadb安装 1.centos7下面的安装我以前有很多教程