mariadb集群配置(主从和多主)

mariadb主从

主从多用于网站架构,因为主从的同步机制是异步的,数据的同步有一定延迟,也就是说有可能会造成数据的丢失,但是性能比较好,因此网站大多数用的是主从架构的数据库,读写分离必须基于主从架构来搭建

主从架构主的数据可以同步到从上,从也可以读写数据,但是从上修改数据,不能同步到主的

主从同步数据会重在延迟(可能延迟一两个小时),延迟并不完全就只是缺点,加入主的数据丢失了,有可能因为延迟从的数据还未同步,可以通过从恢复一部分数据,减少损失

当一主多从时,为了减轻主服务器的压力一般我们会在主从之间加一台代理服务器,同样为了减轻代理的压力,会将代理的引擎换为blackhole引擎

一主多从,由于主只有一台,有单点故障的风险,为了防止发生主故障,可通过两种方法解决:

方法一

通过MHA软件的配置文件监控主从的整个集群,当主的服务器发生故障,会在从的服务器里面选一台作为主服务器,MHA可以监听多个主从集群

方法二

主从设置成互为主备,称为主主架构,互相监听对方的二进制文件,这种方法有个很大的缺点,因为主从之间有延迟,如果主从同时写入有一定冲突的数据,会造成数据的不一致,建议在读取数据多,增删改数据少的情况使用

blackhole引擎只同步二进制文件,不能记录数据和读取数据

mysql主从配置

yum配置

[mariadb]

name=MariaDB

baseurl=http://mirrors.ustc.edu.cn/mariadb/yum/10.3/centos7-amd64/

gpgkey=http://mirrors.ustc.edu.cn/mariadb/yum/RPM-GPG-KEY-MariaDB

gpgcheck=1

服务器1: MariaDB01 192.168.202.99

服务器2: MariaDB02 192.168.202.6

操作系统: CentOS7.3

数据库版本:    MariaDB-10.3.7

主从关系: MariaDB01为主,MariaDB02为从

MariaDB01

1. 修改配置文件 /etc/my.cnf.d/server.cnf

在[mysqld]或[server]下加入以下

server-id=1

log-bin=mysql-bin

2. 重启mysql服务

systemctl restart mysql

3.创建主从连接帐号与授权

grant replication slave on *.* to [email protected]‘%‘ identified by ‘slave‘;

4.查看主的状态

show master status

MariaDB02

1. 修改配置文件 /etc/my.cnf.d/server.cnf

在[mysqld]或[server]下加入以下

server-id=2

2. 重启mysql服务

systemctl restart mysql

3.登录数据库

mysql -uroot -p密码

4.建立主从连接

#注意填写的数据要和主的数据一致

change master to master_host=‘192.168.202.99‘,

master_user=‘slave‘, master_password=‘slave‘,

master_log_file=‘mysql-bin.000002‘,master_log_pos=514;

启动 start slave;

查看状态 show slave status\G;     #  \G表示竖行显示字段内容

5.验证!!!

create database test1

use test1

create table students(id int(10), name char(20), age int(10));

查看从节点是否有test1数据库和students表

6.查看mysql二进制log

mysqlbinlog /var/lib/mysql/mysql-bin.000002

#如果出现不同步可以执行以下步骤

stop slave

set GLOBAL SQL_SLAVE_SKIP_COUNTER=1;

start slave

或者

stop slave;

mysql> change master to

master_host=‘192.168.202.99‘,

master_user=‘user‘,

master_password=‘pwd‘,

master_port=3306,

master_log_file=‘mysql-bin.000002‘,

master_log_pos=514;

start slave

mariadb galera集群(多主)

galera集群多用于关键性业务保证数据的安全,因为galera集群为了数据的一致性,采用的是同步的机制,这就使galera牺牲了一部分性能来换取数据一致性。通过galera组件上的wsrep协议实现高可用,端口4567

最少使用三台服务器,如果只使用两台服务器,一台服务器坏了,另一台还可以正常工作;要是两台主机之间发生网络故障,服务器没有损坏;就会产生脑裂,互相争抢主的位置。为了降低脑裂的概率最少使用三台服务器

实战Mariadb10.3(10.3自带galera软件) galera Cluster集群架构

Mariadb galera Cluster安装:

操作系统:Centos7.3版本

集群数量:3个节点

主机信息:

192.168.153.142 node1 selinux=disabled firewalld关闭

192.168.153.143 node2 selinux=disabled firewalld关闭

192.168.153.144 node3 selinux=disabled firewalld关闭

搭建步骤

1.主机之间互相解析:三台节点都要执行

vim /etc/hosts

192.168.202.99 node1

192.168.202.7 node2

192.168.202.8 node3

2.安装软件包  #mariadb10之前的版本没有galera,mariadb10之后的版本不需要安装

第一种方法:

(yum install -y MariaDB-server MariaDB-client galera)

配置yum安装源和配置mariadb galera安装源

yum源配置挂iso

设置mariadb的yum源并安装(所有节点都要)

修改yum源文件

vi /etc/yum.repos.d/mariadb.repo

[mariadb]

name = MariaDB

baseurl = http://yum.mariadb.org/10.3.5/centos74-amd64

gpgkey=https://yum.mariadb.org/RPM-GPG-KEY-MariaDB

gpgcheck=1

enabled=0

安装galera软件时需要解决它的依赖包:boost-program-options.x86_64 (直接yum源安装即可)

3.mariadb初始化 (三个节点都需要执行)

安装完成后会提示需要对mariadb进行初始化(设置密码)

systemctl start mariadb

mysql_secure_installation (按提示设置mysql密码)

systemctl stop mariadb

4.配置galera

主节点配置文件server.cnf

vim /etc/my.cnf.d/server.cnf

[galera]

wsrep_on=ON

wsrep_provider=/usr/lib64/galera/libgalera_smm.so     #galera的库文件的地址

wsrep_cluster_address="gcomm://192.168.202.99,192.168.202.7,192.168.202.8"   #各节点的ip

wsrep_node_name=node1         #节点主机名  

wsrep_node_address=192.168.202.99 #节点ip

binlog_format=row            #二进制日志设置为行模式

default_storage_engine=InnoDB    #使用的默认引擎

innodb_autoinc_lock_mode=2      #性能最好

wsrep_slave_threads=1              #并行复制线程数

innodb_flush_log_at_trx_commit=0   #0.log buffer将每秒一次地写入log file中,并且log file的flush(刷到磁盘)操作同时进行。该模式下在事务提交的时候,不会主动触发写入磁盘的操作。

                     #1:每次事务提交时MySQL都会把log buffer的数据写入log file,并且flush(刷到磁盘)中去,该模式为系统默认。

                      #2:每次事务提交时MySQL都会把log buffer的数据写入log file,但是flush(刷到磁盘)操作并不会同时进行。该模式下,MySQL会每秒执行一次 flush(刷到磁盘)操作

innodb_buffer_pool_size=120M       #设置缓存池大小

wsrep_sst_method=rsync             #远程同步

wsrep_causal_reads=ON         #避免各个节点的数据不一致,这种情况需要等待全同步复制

将此文件复制到mariadb-2、mariadb-3,注意要把 wsrep_node_name 和 wsrep_node_address 改成相应节点的 hostname 和 ip。

5.启动集群服务:

启动 MariaDB Galera Cluster 服务:

(第一次启动要用初始化:mysqld_safe --wsrep_cluster_address=gcomm://192.168.202.99,192.168.202.7,192.168.202.8 >/dev/null &)

/bin/galera_new_cluster

注意:

如果galera_new_cluster 报错

vim /var/lib/mysql/grastate.dat

把safe_to_bootstrap更改为1

# GALERA saved state

version: 2.1

uuid:   dc4c2656-7b0e-11e9-9818-5afabf61e0ae

seqno:   -1

safe_to_bootstrap: 1

查看uid是否一致,如果不一致,也需要修改

剩余两节点启动方式为:

systemctl start mariadb

查看集群状态:(集群服务使用了4567和3306端口))

ss  -tnl

6.验证集群状态:

在node1上执行:

mysql -uroot -p密码  进入数据库

查看是否启用galera插件

连接mariadb,查看是否启用galera插件

show status like "wsrep_ready";

目前集群机器数

show status like "wsrep_cluster_size";

查看集群状态

show status like "wsrep%";

+------------------------------+----------------------------------------------------------------+

| Variable_name | Value |

+------------------------------+----------------------------------------------------------------+

| wsrep_apply_oooe | 0.000000 |

| wsrep_apply_oool | 0.000000 |

| wsrep_apply_window | 1.000000 |

| wsrep_causal_reads | 6 |

| wsrep_cert_deps_distance | 1.000000 |

| wsrep_cert_index_size | 4 |

| wsrep_cert_interval | 0.000000 |

| wsrep_cluster_conf_id | 22 |

| wsrep_cluster_size | 3 | ##集群成员

| wsrep_cluster_state_uuid | b8ecf355-233a-11e8-825e-bb38179b0eb4 | ##UUID 集群唯一标记

| wsrep_cluster_status | Primary | ##主服务器

| wsrep_commit_oooe | 0.000000 |

| wsrep_commit_oool | 0.000000 |

| wsrep_commit_window | 1.000000 |

| wsrep_connected | ON | ##当前是否连接中

| wsrep_desync_count | 0 |

| wsrep_evs_delayed | |

| wsrep_evs_evict_list | |

| wsrep_evs_repl_latency | 0/0/0/0/0 |

| wsrep_evs_state | OPERATIONAL |

| wsrep_flow_control_paused | 0.000000 |

| wsrep_flow_control_paused_ns | 0 |

| wsrep_flow_control_recv | 0 |

| wsrep_flow_control_sent | 0 |

| wsrep_gcomm_uuid | 0eba3aff-2341-11e8-b45a-f277db2349d5 |

| wsrep_incoming_addresses | 192.168.202.99:3306,192.168.202.7:3306,192.168.202.8:3306 | ##连接中的数据库

| wsrep_last_committed | 4 | ##sql 提交记录

| wsrep_local_bf_aborts | 0 | ##从执行事务过程被本地中断

| wsrep_local_cached_downto | 1 |

| wsrep_local_cert_failures | 0 | ##本地失败事务

| wsrep_local_commits | 4 | ##本地执行的sql

| wsrep_local_index | 2 |

| wsrep_local_recv_queue | 0 |

| wsrep_local_recv_queue_avg | 0.142857 |

| wsrep_local_recv_queue_max | 2 |

| wsrep_local_recv_queue_min | 0 |

| wsrep_local_replays | 0 |

| wsrep_local_send_queue | 0 | ##本地发出的队列

| wsrep_local_send_queue_avg | 0.000000 | ##队列平均时间间隔

| wsrep_local_send_queue_max | 1 |

| wsrep_local_send_queue_min | 0 |

| wsrep_local_state | 4 |

| wsrep_local_state_comment | Synced |

| wsrep_local_state_uuid | b8ecf355-233a-11e8-825e-bb38179b0eb4 | ##集群ID

| wsrep_protocol_version | 8 |

| wsrep_provider_name | Galera |

| wsrep_provider_vendor | Codership Oy <[email protected]> |

| wsrep_provider_version | 25.3.26(r3857) |

| wsrep_ready | ON | ##插件是否应用中

| wsrep_received | 7| ##数据复制接收次数

| wsrep_received_bytes | 688 |

| wsrep_repl_data_bytes | 1741 |

| wsrep_repl_keys | 6 |

| wsrep_repl_keys_bytes | 144 |

| wsrep_repl_other_bytes | 0 |

| wsrep_replicated | 4 | ##随着复制发出的次数

| wsrep_replicated_bytes | 2152 | ##数据复制发出的字节数

| wsrep_thread_count | 2 |

+------------------------------+----------------------------------------------------------------+

查看连接的主机

show status like "wsrep_incoming_addresses";

7.测试集群mariad数据是否同步

MariaDB [(none)]> create database bai;

MariaDB [(none)]> show databases;

在其他两个节点上可以查看bai库已经同步。

原文地址:https://www.cnblogs.com/yunweibai/p/10899611.html

时间: 2024-10-11 11:14:47

mariadb集群配置(主从和多主)的相关文章

mariadb集群配置(主从和多)

mariadb主从 主从多用于网站架构,因为主从的同步机制是异步的,数据的同步有一定延迟,也就是说有可能会造成数据的丢失,但是性能比较好,因此网站大多数用的是主从架构的数据库,读写分离必须基于主从架构来搭建. 环境准备 准备两天同网段的主机,这里设置192.168.253.147为主,192.168.253.148为从 主配置: 1)关闭两台主机的防火墙 2)修改配置文件/etc/my.cnf.d/server.cnf ;在mysql模块下添加:server_id=1  和  log_bin=m

mariadb集群与nginx负载均衡配置--centos7版本

这里配置得是单nginx主机..先准备4台主机,三台mariadb集群,一台nginx. ------------------------------------------------------------------------------------------------------------------------- mariadb集群配置 环境信息 MariaDB Server:MariaDB-10.2.10 CentOS:CentOS Linux release7.2.1511

Mysql、MariaDB 新型主从集群配置GTID

前文谢了<Mysql.MariaDB 传统主从集群配置>,该技术已经非常成熟.从Mysql5.6和MariaDB10.0开始,有了新型的主从方案GTID,不过这两个系统到这个版本出现了分支,具体实现已经不同,配置方法也不同,下文分别讲述. MariaDB: 我用的版本还是10.1版,目前该版本还不是稳定版,但不影响测试.先部署部署好两个数据库实例,参见http://bangbangba.blog.51cto.com/3180873/1701857 直到创建好复制用户. 我们这里的由于是新创建的

mongoDB主从和副本集群配置

mongoDB主从和副本集群配置 Mongodb是时下流行的NoSql数据库(MongoDB是一个基于分布式文件存储的数据库),它的存储方式是文档式存储,并不是Key-Value形式.   优势: 快速!(当然,这和具体的应用方式有关,通常来说,它比一般的关系型数据库快5位左右.) 很高的可扩展性–轻轻松松就可实现PB级的存储(但是可能我们并不需要PB级的存储,10TB可能就够了) 他有一个很好的 replication 模式 (replica sets) 有很完善的Java API 他的存储格

mariadb gelera集群配置

mariadb-gelera配置分为两部分: 第一部分为:正常配置 第二部分为:集群配置 mariadb-gelera的配置文件为: /etc/my.cnf.d/server.cnf 本公司生产环境采用的版本为: mariadb 10.1.8 正常配置: 参考:http://liuzhengwei521.blog.51cto.com/4855442/1881278 集群配置:此配置可应用于生产环境 [galera]    wsrep_on=ON    wsrep_provider = /usr/

MariaDB集群Galera Cluster的研究与测试

MariaDB集群Galera Cluster的研究与测试 Galera Cluster是MariaDB的一个双活多主集群,其可以使得MariDB的所有节点保持同步,Galera为MariaDB提供了同步复制(相对于原生的异步复制),因此其可以保证HA,且其当前仅支持XtraDB/InnoDB存储引擎(扩展支持MyISAM),并且只可在Linux下使用.Galera Cluster拥有以下特性: 真正的多主架构,任何节点都可以进行读写 同步复制,各节点间无延迟且节点宕机不会导致数据丢失 紧密耦合

MariaDB Galera Cluster 部署(如何快速部署 MariaDB 集群)

MariaDB Galera Cluster 部署(如何快速部署 MariaDB 集群)  OneAPM蓝海讯通7月3日 发布 推荐 4 推荐 收藏 14 收藏,1.1k 浏览 MariaDB 作为 Mysql 的一个分支,在开源项目中已经广泛使用,例如大热的 openstack,所以,为了保证服务的高可用性,同时提高系统的负载能力,集群部署是必不可少的. MariaDB Galera Cluster 介绍 MariaDB 集群是 MariaDB 同步多主机集群.它仅支持 XtraDB/ Inn

Redis集群redis主从自动切换Sentinel(哨兵模式)

Redis SentinelSentinel(哨兵)是用于监控redis集群中Master状态的工具,其已经被集成在redis2.4+的版本中 一.Sentinel作用:1):Master状态检测 2):如果Master异常,则会进行Master-Slave切换,将其中一个Slave作为Master,将之前的Master作为Slave3):Master-Slave切换后,master_redis.conf.slave_redis.conf和sentinel.conf的内容都会发生改变,即mast

中小企业openstack私有云布署实践【5 数据库MariaDB 集群】

kxcontroller1   kxcontroller2  controller1 这3台作角色 确保服务器的域名解析访问正常 确保NTP时间同步 配置HAproxy主备访问,其中的一项数据库3306端口项,参考Haproxy配置文档. 每台安装如下包 ---------------------------------------------------------------------- 201511月的安装包如下 yum install -y  mariadb-galera-server