高性能集群软件-----Keepalived 安装配置

keepalived介绍：

Keepalived是Linux下轻量级的高可用的解决方案。Keepalived主要是通过虚拟路由冗余来实现高可用功能，具有部署和使用非常简单，只需一个配置文件即可。它是根据TCP/IP参考模型的第三，第四和第五层交换机检测到每个服务接点的状态，如果某个服务节点出现异常，或者出现故障，keepalived将检测到，并将出现故障的服务节点从集群中剔除，而在故障节点恢复后，keepalived又可以自动将此服务节点重新加入服务器集群中，这些工作全部自动完成，不需要人工干涉，需要人工完成的只是修复出现故障的服务节点。（2台服务器运行Keepalived，一台为主服务器（MASTER），一台为备份服（BACKUP），但是对外表现为一个虚拟IP，主服务器会发送特定的消息给备份服务器，当备份服务器收不到这个消息的时候，即主服务器宕机的时候， 备份服务器就会接管虚拟IP，继续提供服务，从而保证了高可用性）。keepalived采用的是vrrp来实现的。

安装和配置：

1，编译安装：

[[email protected] install]#cd /tmp/install

[[email protected] install]# yum install gcc gcc-c++ openssl* kernel-devel net-snmp* libnl* -y

[[email protected] install]#wget http://www.keepalived.org/software/keepalived-1.2.19.tar.gz

###或者直接在官网上下载

[[email protected] install]#tar zxvf keepalived-1.2.19.tar.gz

[[email protected] install]#cd  keepalived-1.2.19

[[email protected] install]#./configure   --prefix=/usr/local/keepalived

[[email protected] install]#make && make install

2,配置：

（1）环境说明

hostname PI 安装软件 OS
Master 192.168.122.120 nginx（已安装).keepalived Centos6.5
backup 192.168.122.121 nginx（已安装).keepalived Centos6.5
vip（虚拟IP） 192.168.122.130

备注：依次在192.168.122.120和192.168.122.121进行编译安装如上边的步骤,安装完成之后，会在/usr/local下生成bin、etc、sbin三个文件夹，主要的配置文件在etc目录下，执行文件在sbin目录下

（2）依次在120和121上操作：

(a)####keepalive启动时默认会去读/etc/keepalived/keepalived.conf配置文件，但编译安转后，没有自动创建这个文件，而是放到了/usr/local/etc/keepalived/keepalived.conf

为了以后配置方便，我们手动将/usr/local/etc/keepalived/keepalived.conf放到/etc/keepalived/下

[[email protected] install]#mkdir /etc/keepalived/
[[email protected] install]#cp /usr/local/keepalived/etc/keepalived/keepalived.conf /etc/keepalived/
[[email protected] install]#cp /usr/local/keepalived/etc/sysconfig/keepalived  /etc/sysconfig/keepalived

(b)#####建立服务启动脚本

[[email protected] install]#cp /usr/local/keepalived/etc/rc.d/init.d/keepalived /etc/init.d/
[[email protected] install]#chmod +x /etc/init.d/keepalived

(c)####更改启动脚本中keepalive启动参数文件的位置，脚本文件路径是/etc/sysconfig/keepalived（如果是通过yum安装，则这个位置就是正确的），而实际文件是在/usr/local/keepalived/etc/sysconfig/keepalived

#sed -i ‘s#/etc/sysconfig/keepalived#/usr/local/etc/sysconfig/keepalived#g‘  /etc/init.d/keepalived

[[email protected] install]#vi /etc/init.d/keepalived

#!/bin/sh
#
# Startup script for the Keepalived daemon
#
# processname: keepalived
# pidfile: /var/run/keepalived.pid
# config: /etc/keepalived/keepalived.conf
# chkconfig: - 21 79
# description: Start and stop Keepalived
# Source function library
. /etc/rc.d/init.d/functions
# Source configuration file (we set KEEPALIVED_OPTIONS there)
. /usr/local/keepalived/etc/sysconfig/keepalived
RETVAL=0
prog="keepalived"
start() {
    echo -n $"Starting $prog: "
    daemon keepalived ${KEEPALIVED_OPTIONS}
    RETVAL=$?
    echo
    [ $RETVAL -eq 0 ] && touch /var/lock/subsys/$prog
}
"/etc/init.d/keepalived" 74L, 1329C

（d)给/usr/local/keepalived/sbin/keepalived做个软连接，否则会报错

[[email protected] sbin]# /etc/init.d/keepalived start
Starting keepalived: /bin/bash: keepalived: command not found
                                                           [FAILED]
[[email protected] sbin]# ln -s /usr/local/keepalived/sbin/keepalived /usr/bin/
[[email protected] sbin]# /etc/init.d/keepalived start
Starting keepalived:                                       [  OK  ]
[[email protected] sbin]#

（3)配置keepalived.conf 主要配置三个地方：state MASTER ,priority 99 和virtual_ipaddress {192.168.122.130}

[email protected] sbin]# vi /etc/keepalived/keepalived.conf 
! Configuration File for keepalived
global_defs {                                     #全局设置
   router_id LVS_DEVEL                           #仅仅是个机器标识，可自定义
}
vrrp_script check_http {                   #首先在vrrp_script区域定义脚本名字和脚本执行的间隔和脚本执行的优先级变更
   script "/root/chk_httpd.sh"            #然后在实例(vrrp_instance)里面引用，有点类似脚本里面的函数引用一样：先定义，后引用函数名
   interval 2                             #脚本执行间隔
   weight 10
}
vrrp_instance VI_1 {                       #定义一个vrrp实例名，可自定义
    state MASTER                         #设定初始状态，可以是MASTER或BACKUP，不过当其他节点keepalived启动时会将priority比较大的节点选举为MASTER，因此该项其实没有实质用途。
    interface eth0                       #具有固定ip的网卡，用来接收和发送vrrp包。如果没有设定mcast_src_ip发送多播数据包的地址，那么将使用这个网卡的ip来发送。
    virtual_router_id 51                #取值在0-255之间，用来区分多个instance的VRRP组播。相同的VRID为一个组，他将决定多播的MAC地址
    priority 99                        #设置本节点的优先级，优先级高的为master
    advert_int 1                        #组播信息发送间隔，两个节点设置必须一样，默认为1秒
    authentication {                    #设置节点间验证信息，所以所有节点必须一致
auth_type PASS
auth_pass 1111
    }
    track_script {                      #引用上面定义的检测脚本
check_http
weight 20
     }
    virtual_ipaddress {                #设置vip，如果不指定网卡，那么默认绑定到interface指定的网卡，可以通过添加dev ethx的方式，绑定到指定的网卡。
192.168.122.130
    }
}

同理，在121上进行操作：

vi /etc/keepalived/keepalived.conf
! Configuration File for keepalived
global_defs {
   router_id LVS_DEVEL
}
vrrp_script check_http {
   script "/root/chk_httpd.sh"
   interval 2
   weight 10
}
vrrp_instance VI_1 {
    state BACKUP#此处为BACKUP
    interface eth0
    virtual_router_id 51
    priority 96#此处比MASTER要小
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    track_script {
        check_http
        weight 20
     }
    virtual_ipaddress {
        192.168.122.130
    }
}

(4）120和121同时启动keepalived

[[email protected] ~]# /etc/init.d/keepalived start
Starting keepalived:                                       [  OK  ]
[[email protected] ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 16436 qdisc noqueue state UNKNOWN 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 52:54:00:05:7b:31 brd ff:ff:ff:ff:ff:ff
    inet 192.168.122.120/24 brd 192.168.122.255 scope global eth0
    inet 192.168.122.130/32 scope global eth0
    inet6 fe80::5054:ff:fe05:7b31/64 scope link 
       valid_lft forever preferred_lft forever
[[email protected] ~]# /etc/init.d/keepalived start
Starting keepalived:                                       [  OK  ]
[[email protected] ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 16436 qdisc noqueue state UNKNOWN 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 52:54:00:c6:65:80 brd ff:ff:ff:ff:ff:ff
    inet 192.168.122.121/24 brd 192.168.122.255 scope global eth0
    inet6 fe80::5054:ff:fec6:6580/64 scope link 
       valid_lft forever preferred_lft forever

打开浏览器进行查看：

(5)验证实验结果：

实验一：关闭120的keepalived服务看是否切换：

[[email protected] ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 16436 qdisc noqueue state UNKNOWN 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 52:54:00:05:7b:31 brd ff:ff:ff:ff:ff:ff
    inet 192.168.122.120/24 brd 192.168.122.255 scope global eth0
    inet6 fe80::5054:ff:fe05:7b31/64 scope link 
       valid_lft forever preferred_lft forever

在查看下121的IP地址：

[[email protected] ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 16436 qdisc noqueue state UNKNOWN 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 52:54:00:c6:65:80 brd ff:ff:ff:ff:ff:ff
    inet 192.168.122.121/24 brd 192.168.122.255 scope global eth0
    inet 192.168.122.130/32 scope global eth0
    inet6 fe80::5054:ff:fec6:6580/64 scope link 
       valid_lft forever preferred_lft forever
[[email protected] ~]#

已成功切换，在打开浏览器：

实验二：重新启动120,查看下虚拟ip130是否切换过来：

[[email protected] ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 16436 qdisc noqueue state UNKNOWN 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 52:54:00:05:7b:31 brd ff:ff:ff:ff:ff:ff
    inet 192.168.122.120/24 brd 192.168.122.255 scope global eth0
    inet 192.168.122.130/32 scope global eth0
    inet6 fe80::5054:ff:fe05:7b31/64 scope link 
       valid_lft forever preferred_lft forever
[[email protected] ~]#

已成功切换过来，再看121的IP地址：

[[email protected] ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 16436 qdisc noqueue state UNKNOWN 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 52:54:00:c6:65:80 brd ff:ff:ff:ff:ff:ff
    inet 192.168.122.121/24 brd 192.168.122.255 scope global eth0
    inet 192.168.122.130/32 scope global eth0
    inet6 fe80::5054:ff:fec6:6580/64 scope link 
       valid_lft forever preferred_lft forever
[[email protected] ~]#

查看下浏览器：

已正常切换

备注：keepalived日志文件的分离

注意，如果有报错的话，请查看keepalived日志文件，keepalived日志文件默认的都是写入到/var/log/message下的，由于日志文件过大，现在需要分离出来日志文件，步骤：

1，修改/etc/sysconfig/keepalived 把KEEPALIVED_OPTIONS="-D" 修改为KEEPALIVED_OPTIONS="-D -d -S 0"

[[email protected] sysconfig]# vi /etc/sysconfig/keepalived 
# Options for keepalived. See `keepalived --help‘ output and keepalived(8) and
# keepalived.conf(5) man pages for a list of all options. Here are the most
# common ones :
#
# --vrrp               -P    Only run with VRRP subsystem.
# --check              -C    Only run with Health-checker subsystem.
# --dont-release-vrrp  -V    Dont remove VRRP VIPs & VROUTEs on daemon stop.
# --dont-release-ipvs  -I    Dont remove IPVS topology on daemon stop.
# --dump-conf          -d    Dump the configuration data.
# --log-detail         -D    Detailed log messages.
# --log-facility       -S    0-7 Set local syslog facility (default=LOG_DAEMON)
#
KEEPALIVED_OPTIONS="-D -d -S 0"

2,设置syslog，修改/etc/rsyslog.conf 最后添加：

# keepalived -S 0

local0.*

[[email protected] sysconfig]# vi /etc/rsyslog.conf 
# rsyslog v5 configuration file
# For more information see /usr/share/doc/rsyslog-*/rsyslog_conf.html
# If you experience problems, see http://www.rsyslog.com/doc/troubleshoot.html
#### MODULES ####
$ModLoad imklog   # provides kernel logging support (previously done by rklogd)
#$ModLoad immark  # provides --MARK-- message capability
# Provides UDP syslog reception
#$ModLoad imudp
#$UDPServerRun 514
# Provides TCP syslog reception
#$ModLoad imtcp
#$InputTCPServerRun 514
#### GLOBAL DIRECTIVES ####
# Use default timestamp format
$ActionFileDefaultTemplate RSYSLOG_TraditionalFileFormat
# not useful and an extreme performance hit
#$ActionFileEnableSync on
# ### begin forwarding rule ###
# The statement between the begin ... end define a SINGLE forwarding
# rule. They belong together, do NOT split them. If you create multiple
# forwarding rules, duplicate the whole block!
# Remote Logging (we use TCP for reliable delivery)
#
# An on-disk queue is created for this action. If the remote host is
# down, messages are spooled to disk and sent when it is up again.
#$WorkDirectory /var/lib/rsyslog # where to place spool files
#$ActionQueueFileName fwdRule1 # unique name prefix for spool files
#$ActionQueueMaxDiskSpace 1g   # 1gb space limit (use as much as possible)
#$ActionQueueSaveOnShutdown on # save messages to disk on shutdown
#$ActionQueueType LinkedList   # run asynchronously
#$ActionResumeRetryCount -1    # infinite retries if host is down
# remote host is: name/ip:port, e.g. 192.168.0.1:514, port optional
#*.* @@remote-host:514
# ### end of the forwarding rule ###
#keepalived -S 0
local0.*  /etc/keepalived/keepalived.log

3,重启日志文件：

local0.*  /etc/keepalived/keepalived.log

[[email protected] sysconfig]# /etc/init.d/rsyslog restart
Shutting down system logger:                               [  OK  ]
Starting system logger:                                    [  OK  ]
[[email protected] sysconfig]# /etc/init.d/keepalived restart
Stopping keepalived:                                       [  OK  ]
Starting keepalived:   
[[email protected] keepalived]# tail -f /etc/keepalived/keepalived.log 
Jan 15 17:37:27 hadoop1 Keepalived_vrrp[2008]: VRRP_Instance(VI_1) Received lower prio advert, forcing new election
Jan 15 17:37:27 hadoop1 Keepalived_vrrp[2008]: VRRP_Instance(VI_1) Sending gratuitous ARPs on eth0 for 192.168.122.130

日志正常输出。

时间： 2024-10-06 12:12:27

高性能集群软件-----Keepalived 安装配置的相关文章

高性能集群软件Keepalived之基础知识篇

一.Keepalived介绍 Keepalived是Linux下一个轻量级的高可用解决方案,它与HeartBeat.RoseHA实现的功能类似,都可以实现服务或者网络的高可用,但是又有差别:HeartBeat是一个专业的.功能完善的高可用软件,它提供了HA软件所需的基本功能,比如心跳检测和资源接管,监测集群中的系统服务,在群集节点间转移共享IP地址的所有者等,HeartBeat功能强大,但是部署和使用相对比较麻烦:与HeartBeat相比,Keepalived主要是通过虚拟路由冗余来实现高可用功

高性能集群软件Keepalived的介绍以及安装与配置

Keepalived介绍: Keepalived是Linux下一个轻量级的高可用解决方案:起初是为LVS设计的,专门用来监控集群系统中各个服务节点的状态.它根据TCP/IP参考模型的第三.第四和第五层交换机机制检测每个服务节点的状态,如果某个服务节点出现异常,或工作出现故障,Keepalived将检测到,并将出现故障的服务节点从集群系统中剔除,而在故障节点恢复正常后,Keepalived又可以自动将此服务节点重新加入服务器集群中,这些工作全部自动完成,不需要人工干涉,需要人工完成的只是修复出现故

高性能集群软件Keepalived之安装配置篇

一.Keepalived的安装过程 Keepalived的安装非常简单,下面通过源码编译的方式介绍下Keepalived的安装过程.首先打开Keepalived的官方网址http://www.keepalived.org,从中可以下载到各种版本的Keepalived,这里下载的是keepalived-1.2.12.tar.gz.以操作系统环境Centos6.3为例,Keepalived安装步骤如下: [[email protected] app]#tar zxvf keepalived-1.2.

高可用集群之heartbeat安装配置

高可用集群之heartbeat安装配置 说明: 系统为rhel 5.8 64bit heartbeat版本为v2 配置web高可用服务 节点为两个:node1和node2 创建高可用集群需要注意的地方: 各节点需要传递集群事务信息,传递时需要识别各节点,每个节点对对方的识别必须靠节点名称来实现,节点名称能够解析IP地址,配置DNS的话,如果DNS挂了,节点也找不到了,所以对于名称的解析不要依赖DNS,这就需要使用本地hosts文件,需要为每一个节点配置好hosts文件解析,每一个节点的hosts

kafka集群精华之-----安装配置、扩容、监控

kafka集群细节支出折磨我死去活来,查看众多文档进度缓慢,内容重复,所以站在大佬的肩膀上 整理文档记录它. kafka说明: 一个Topic可以认为是一类消息,每个topic将被分成多个partition(区),,此外kafka还可以配置partitions需要备份的个数(replicas).有多少个partitions就意味着有多少个"leader",kafka会将"leader"均衡的分散在每个实例上,来确保整体的性能稳定. kafka是通过zookeeper

Linux集群系列之十——高可用集群之heartbeat安装配置

rhel 5.8 32bit heartbeat v2 ha web node1 node2 节点名称, /etc/hosts 节点名称必须跟uname -n命令的直行结果一致 ssh 互信通信, 时间同步 1先配置两个主机的ip 列如 192.168.1.11   192.168.1.12 VIP192.168.1.8  网关 192.168.1.1 配置两个主机的主机名#hostname node1.mylinux.com #hostname node2.mylinux.com 为了让主机名

elasticsearch7.5.0+kibana-7.5.0+cerebro-0.8.5集群生产环境安装配置及通过elasticsearch-migration工具做新老集群数据迁移

一.服务器准备 目前有两台128G内存服务器,故准备每台启动两个es实例,再加一台虚机,共五个节点,保证down一台服务器两个节点数据不受影响. 二.系统初始化 参见我上一篇kafka系统初始化:https://www.cnblogs.com/mkxfs/p/12030331.html 三.安装elasticsearch7.5.0 1.因zookeeper和kafka需要java启动 首先安装jdk1.8环境 yum install java-1.8.0-openjdk-devel.x86_64

HA 集群软件 keepalived 详解3

在前两篇文章中我们队keepalived做了相关介绍,这里环境还是和之前保持的一样,这次我们主要介绍vrrp_script模块,在上次介绍keepalived基础HA功能时用到了vrrp_script这个模块,此模块专门用于对集群中服务自己进行监控,与此模块一起使用的还有track_script模块,在此模块中可以引用监控脚本,命令组合,shell语句等,以实现对服务端口多方面的监控,track_script模块主要用来调用vrrp_script模块使keepalived执行对集群服务资源的检查

HPC 高性能集群基础环境安装

HPC 基础环境配置 1.1.操作系统 配置? 操作系统:redhat enterprise linuxt 6? 管理节点:HOSTNAME:desktop IP:192.168.199.132计算节点: HOSTNAME:c1 IP:192.168.199.133 HOSTNAME:c2 IP:192.168.199.134? 网络配置:固定IP,各个节点互通? 配置本地域名解析(所有节点):将所有的节点的IP HOSTNAME 写入到 /etc/hosts 并分发到所有节点. [[email