eql高可用部署方案

运行环境

服务器两台（后面的所有配置案例都是以10.96.0.64和10.96.0.66为例）

操作系统CentOS release 6.2

必须要有共同的局域网网段

两台服务器都要安装keepalived(双机热备)和eql服务

软件部署

keepalived 部分

keepalived是一个用于做双机热备（HA）的软件，常和haproxy联合起来做热备＋负载均衡，达到高可用。

keepalived通过选举（看服务器设置的权重）挑选出一台热备服务器做MASTER机器，MASTER机器会被分配到一个指定的虚拟ip，外部程序可通过该ip访问这台服务器，如果这台服务器出现故障（断网，重启，或者本机器上的keepalived crash等），keepalived会从其他的备份机器上重选（还是看服务器设置的权重）一台机器做MASTER并分配同样的虚拟IP，充当前一台MASTER的角色。

服务器两台，两台机器要通局域网，虚拟IP会被设置在他们共有的局域网内

10.96.0.64   CentOS release 6.2

10.96.0.66   CentOS release 6.2

安装popt库

sudo yum install popt-devel.x86_64

下载软件包

wget http://www.keepalived.org/software/keepalived-1.2.2.tar.gz

解压安装

tar -zxvf keepalived-1.2.2.tar.gz
cd keepalived-1.2.2
./configure --prefix=/usr/local/keepalived
make
make install

下面这几步不是必须的，但是为了方便以后的操作建议做了

sudo cp /usr/local/keepalived/sbin/keepalived /usr/sbin/
sudo cp /usr/local/keepalived/etc/sysconfig/keepalived /etc/sysconfig/
sudo cp /usr/local/keepalived/etc/rc.d/init.d/keepalived /etc/init.d/

为keepalived创建配置文件存放路径

sudo mkdir -p /etc/keepalived/

打开配置文件

sudo emacs  /etc/keepalived/keepalived.conf

下面是服务器上的配置文件，两台服务器的配置选项完全一样，但是配置的值按在本机的具体情况，配置项在下面会解释

global_defs
{
    notification_email
    {
        [email protected]
    }
    notification_email_from [email protected]
    smtp_server 127.0.0.1
    stmp_connect_timeout 30
    router_id lnmp_node1
}

vrrp_instance lnmp {
    state MASTER
    interface eth0
    virtual_router_id 51
    mcast_src_ip 10.96.0.64

    priority 200
    advert_int 1
    track_interface {
         eth0
    }

    authentication {
        auth_type PASS
        auth_pass 123456
    }
    virtual_ipaddress {
        10.96.0.103/16 dev eth0 scope global
    }
}
  • global_defs： 全局配置标识，表面下面的区域{}是全局配置
  • notification_email： 里面填邮箱地址，如果keepalived在发生诸如切换操作时会的发邮件到配置上的邮箱，邮件地址可以多个，每行一个。
  • notification_email_from：表示发送通知邮件时邮件源地址是谁
  • smtp_server：表示发送email时使用的smtp服务器地址，可以填127.0.0.1
  • smtp_connect_timeout：连接smtp超时时间
  • vrrp_instance：各服务器上实例配置域，这里按本服务器的具体情况填值
  • state：本实例启动状态，MASTER／SLAVE，不管填MASTER／SLAVE，最终还是要看本机器的权重。
  • interface：实例绑定的网卡，因为在配置虚拟IP的时候必须是在已有的网卡上添加的，这里按本机情况而定
  • virtual_router_id：这里设置VRID，如果两台机器是同一个备份组，设置一样
  • priority：设置本节点的优先级，哪个服务器的优先级高的为master，不能超过255
  • advert_int：组播信息发送间隔，同一个备份组两个机器设置必须一样，默认是1S
  • authentication：验证域，同组的机器auth_type（验证类型）和auth_pass（验证密码）必须一样
  • virtual_ipaddress：VIP，为master机器设置的虚拟地址，和实例绑定的网卡（interface）设置到一个网段

配置好了就可以直接启动了

sudo /etc/init.d/keepalived restart

启动好以后可以用 ip a 命令看虚拟IP的绑定情况，我的配置是192.168.1.135上的权重高，所以VIP绑定到135上面

(ape0!1120)~/eql_core(10.96.0.64)ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 16436 qdisc noqueue state UNKNOWN
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
    inet6 ::1/128 scope host
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:16:3e:7e:a9:d5 brd ff:ff:ff:ff:ff:ff
    inet 10.96.0.64/16 brd 10.96.255.255 scope global eth0
    inet 10.96.0.103/16 scope global secondary eth0
    inet6 fe80::216:3eff:fe7e:a9d5/64 scope link
       valid_lft forever preferred_lft forever
(ape0!1121)~/eql_core(10.96.0.64)

这时候就可以用10.96.0.103这个IP访问10.96.0.64这台机器了

出现的问题记录：

1. 在配好主从备份之后，发现虚拟IP能ping通，但是访问虚拟IP对应机器上的服务(不是apache或者mysql之类的公用软件)却不成功，这是因为要访问的服务绑定了主机上的一个实体IP不是INADDR_ANY地址，所以连接不上。

2.记得设置防火墙和关闭selinux策略

关闭selinux

vi /etc/sysconfig/selinux
修改：
SELINUX=disabled
#setenforce 0

3.注意配置文件里的advert_int选项，这个是两台机器相互检测的时间间隔，如果想在一台机器宕机之后VIP能很快的跳转到另外一台机器，请把这个值设置小一点。

4.有时候可能会出现设置都正确，但是虚拟ip依旧访问不了的情况，这时候请让机房人员为这个ip设置路由。

＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝

eql部分

eql的下载和安装请看eql和egg的安装文档，这里就不重复了，eql高可用部署方案必须下载目前的trunk版本。

在eql和egg安装成功后，请进入eql的根目录下的rep目录 里面有三个文件

eql_master.sh

eql_slave.sh

eqld_alive.sh

＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝

eql_master.sh用于启动master机器上的所有服务

下面例子和相关注释

有的选项值要根据实际情况来设置，请看各选项的解释

#!/bin/bash                                                                                                                                          

#启动master机器上的eqld和eqlRepd服务
if [ "$1" = "start" ]
then
# --socket=/tmp/eql.socket 是本地socket文件路径，这个可以不用做改动
# --binlogdir=/ape/eql/eqllog/ 是eql的log日志路径，这个可以不用做改动，但是路径必须存在
# --ip=0.0.0.0 服务是绑定机器所有的IP，这个也不用改动
# --port=30001 服务绑定的端口号，这个按照实际情况设置
nohup eqld --socket=/tmp/eql.socket --binlogdir=/ape/eql/eqllog/ --ip=0.0.0.0 --port=30001 &

# --repnet 10.96.0.64:20000 eqlRepd服务绑定的ip和端口号，这个按照实际情况设置
# --binlog /ape/eql/eqllog/ 是eql的log日志路径，这个可以不用做改动，但是路径必须存在
# --members 10.96.0.66:20000 另外那台机器eqlRepd服务的ip和端口，也就是说如果本机是master这里填slave的，如果本机是slave这里填master的
# --eqldnet 10.96.0.64:30001 本机连接的eqld的ip和端口号
nohup eqlRepd --repnet 10.96.0.64:20000 --binlog /ape/eql/eqllog/ --members 10.96.0.66:20000 --eqldnet 10.96.0.64:30001 &

#停止master机器上的eqld和eqlRepd服务
elif [ "$1" = "stop" ]
then
pkill eqld
pkill eqlRepd

#重启master机器上的eqld和eqlRepd服务
elif [ "$1" = "restart" ]
then
pkill eqld
pkill eqlRepd
nohup eqld --socket=/tmp/eql.socket --binlogdir=/ape/eql/eqllog/ --ip=0.0.0.0 --port=30001 &
nohup eqlRepd --repnet 10.96.0.64:20000 --binlog /ape/eql/eqllog/ --members 10.96.0.66:20000 --eqldnet 10.96.0.64:30001 &
fi

＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝

eql_slave.sh用于启动slave机器上的所有服务

slave机器上的eqld分为2个，一个是给外部访问的，这个的端口要和master上的eqld保持一样，并且仅可读不可修改和添加操作。另外一个是用来接受master传过来的同步日志操作，这个是可读可写模式。至于eqlRep和master介绍的一样

下面例子和相关注释

有的选项值要根据实际情况来设置，请看各选项的解释

#!/bin/bash
if [ "$1" = "start" ]
then

# --readonly 启动只读模式
# --socket=/tmp/eql_r.socket 是本地socket文件路径，这个可以不用做改动
# --binlogdir=/ape/eql/eqllog/ 是eql的log日志路径，这个可以不用做改动，但是路径必须存在
# --ip=0.0.0.0 服务是绑定机器所有的IP，这个也不用改动
# --port=30002 服务绑定的端口号，这个按照实际情况设置
nohup eqld --readonly --socket=/tmp/eql_r.socket --binlogdir=/ape/eql/eqllog/ --ip=0.0.0.0 --port=30001 &

# --socket=/tmp/eql.socket 是本地socket文件路径，这个可以不用做改动
# --binlogdir=/ape/eql/eqllog/ 是eql的log日志路径，这个可以不用做改动，但是路径必须存在
# --ip=0.0.0.0 服务是绑定机器所有的IP，这个也不用改动
# --port=30002 服务绑定的端口号，这个按照实际情况设置
nohup eqld  --socket=/tmp/eql.socket --binlogdir=/ape/eql/eqllog/ --ip=0.0.0.0 --port=30002 &

# --repnet 10.96.0.66:20000 eqlRepd服务绑定的ip和端口号，这个按照实际情况设置
# --binlog /ape/eql/eqllog/ 是eql的log日志路径，这个可以不用做改动，但是路径必须存在
# --members 10.96.0.64:20000 另外那台机器eqlRepd服务的ip和端口，也就是说如果本机是master这里填slave的，如果本机是slave这里填master的
# --eqldnet 10.96.0.66:30002 本机连接的eqld的ip和端口号,slave机器上填拥有可写可读权限的那个eqld
nohup eqlRepd --repnet 10.96.0.66:20000 --binlog /ape/eql/eqllog/ --members 10.96.0.64:20000 --eqldnet 10.96.0.66:30002 &
elif [ "$1" = "stop" ]
then
pkill eqld
pkill eqlRepd
elif [ "$1" = "restart" ]
then
pkill eqld
pkill eqlRepd
nohup eqld --readonly --socket=/tmp/eql.socket --binlogdir=/ape/eql/eqllog/ --ip=0.0.0.0 --port=30001 &
nohup eqld  --socket=/tmp/eql.socket --binlogdir=/ape/eql/eqllog/ --ip=0.0.0.0 --port=30002 &
nohup eqlRepd --repnet 10.96.0.66:20000 --binlog /ape/eql/eqllog/ --members 10.96.0.64:20000 --eqldnet 10.96.0.66:30002 &
fi

＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝

eqld_alive.sh用来监控服务器上的eqld是否存活，如果不存在了就关闭keepalived让虚拟IP切换

下面是例子内容

while true
do
process_cnt=`ps -ef|grep "eqld --socket=/tmp/eql.socket --binlogdir=/ape/eql/eqllog/ --ip=0.0.0.0 --port=30001"|wc -l`
if [ 2 != "$process_cnt" ];then
/etc/init.d/keepalived stop

fi
sleep 5
done

＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝

启动步骤

1.在两台机器上分别启动eqld_alive.sh脚本

2.在master机器上启动eql_master.sh脚本,在slave机器启动eql_master.sh脚本

3 分别启动两台机器的keepalived

时间： 2024-10-13 11:20:27

eql高可用部署方案的相关文章

开源jms服务ActiveMQ的负载均衡+高可用部署方案探索

一个文件(或目录)拥有若干个属性,包括(r/w/x)等基本属性,以及是否为目录(d)与文件(-)或连接文件(l)等属性.此外,Linux还可以设置其他系统安全属性,使用chattr来设置,以lsattr来查看,最重要的是可以设置其不可修改的特性,即便是文件的拥有者都不能进行修改.这个属性相当重要,尤其是在安全机制方面(security). 文件默认权限:umask 当建立一个新的文件或目录时,它的默认属性是与umask有关的.通常,umask就是指定当前用户在建立文件或目录时的属性默认值.那么,

Centos7.2 下DNS+NamedManager高可用部署方案完整记录

Centos7.2 下DNS+NamedManager高可用部署方案完整记录 之前说到了NamedManager单机版的配置,下面说下DNS+NamedManager双机高可用的配置方案: 1)机器环境 主机名            ip地址 dns01.kevin.cn   172.22.51.65 dns02.kevin.cn   172.22.51.74 VIP地址:172.22.51.75 两台机器做好主机名及hosts绑定 [[email protected] ~]# vim /etc

ActiveMQ实现负载均衡+高可用部署方案

一.架构和技术介绍 1.简介 ActiveMQ 是Apache出品,最流行的,能力强劲的开源消息总线.完全支持JMS1.1和J2EE 1.4规范的JMS Provider实现 2.activemq的特性 1. 多种语言和协议编写客户端.语言: Java, C, C++, C#, Ruby, Perl, Python, PHP.应用协议: OpenWire,Stomp REST,WS Notification,XMPP,AMQP 2. 完全支持JMS1.1和J2EE 1.4规范 (持久化,XA消息

ActiveMQ实现负载均衡+高可用部署方案(转)

本文转自:http://www.open-open.com/lib/view/open1400126457817.html%20 一.架构和技术介绍 1.简介 ActiveMQ 是Apache出品,最流行的,能力强劲的开源消息总线.完全支持JMS1.1和J2EE 1.4规范的 JMS Provider实现 2.activemq的特性 1. 多种语言和协议编写客户端.语言: Java, C, C++, C#, Ruby, Perl, Python, PHP.应用协议: OpenWire,Stomp

[转载]ActiveMQ实现负载均衡+高可用部署方案

转载于 http://www.open-open.com/lib/view/open1400126457817.html 一.架构和技术介绍 1.简介 ActiveMQ 是Apache出品,最流行的,能力强劲的开源消息总线.完全支持JMS1.1和J2EE 1.4规范的 JMS Provider实现 2.activemq的特性 1. 多种语言和协议编写客户端.语言: Java, C, C++, C#, Ruby, Perl, Python, PHP.应用协议: OpenWire,Stomp RES

15、 Heartbeat+DRBD+MySQL高可用架构方案与实施过程细节

15. Heartbeat+DRBD+MySQL高可用架构方案与实施过程细节 参考自:http://oldboy.blog.51cto.com/2561410/1240412 heartbeat和keepalived应用场景及区别 很多网友说为什么不使用keepalived而使用长期不更新的heartbeat,下面说一下它们之间的应用场景及区别: 1.对于web,db,负载均衡(lvs,haproxy,nginx)等,heartbeat和keepalived都可以实现 2.lvs最好和keepa

MySQL数据库的优化（下）MySQL数据库的高可用架构方案

MySQL数据库的优化(下)MySQL数据库的高可用架构方案 2011-03-09 08:53 抚琴煮酒 51CTO 字号:T | T 在上一篇MySQL数据库的优化中,我们跟随笔者学习了单机MySQL数据库的优化,今天我们继续跟随笔者学习MySQL优化的集群方案. AD:51CTO 网+首届APP创新评选大赛火热启动——超百万资源等你拿! [51CTO独家特稿]在上一篇MySQL数据库的优化中,我们跟随笔者学习了单机MySQL数据库的优化,今天我们继续跟随笔者学习MySQL优化的集群方案. M

Exchange 日常管理七之：客户端访问服务器高可用部署

Exchange 日常管理七之:客户端访问服务器高可用部署 之前的博文中我们已经成功部署了两台Exchange2010的CAS/HUB服务器,现在我们要把两台CAS/HUB服务器合并为一个CAS阵列.在Exchange2003中,用户可以直接访问Exchange的邮箱服务器.但从Exchange2007开始,用户就不能直接访问邮箱服务器了,用户若想访问邮箱服务器就必须访问CAS服务器才可以连接到自己的邮箱.这样CAS服务器就成为访问Exchange服务器所必须面对的一个前台接待.所以一旦CAS服

第2节 Spark集群安装：1 - 3；第3节 Spark HA高可用部署：1 - 2

三. Spark集群安装 3.1 下载spark安装包 下载地址spark官网:http://spark.apache.org/downloads.html 这里我们使用 spark-2.1.3-bin-hadoop2.7版本. 3.2 规划安装目录 /export/servers 3.3 解压安装包 tar -zxvf spark-2.1.3-bin-hadoop2.7.tgz 3.4 重命名目录 mv spark-2.1.3-bin-hadoop2.7 spark 3.5 修改配置文件 配置