keepalived实现lvs高可用并负载均衡lamp

一、安装lamp

1、安装httpd（172.16.23.211）

[[email protected] ~]# yum install -y httpd

2、安装php（172.16.23.211）

[[email protected] ~]# yum install -y php

3、安装php-mysql（172.16.23.211）

[[email protected] ~]# yum install -y php-mysql

4、安装mariadb（172.16.23.211 CentOS7）

[[email protected] ~]# yum install -y mariadb-server

5、配置MPM模型

这里我启用的是event模型

[[email protected] ~]# cd /etc/httpd/conf.modules.d/
[[email protected] conf.modules.d]# vim 00-mpm.conf
#注释掉prefork，开起event
#LoadModule mpm_prefork_module modules/mod_mpm_prefork.so
LoadModule mpm_event_module modules/mod_mpm_event.so

MPM：多路处理模块

prefork：是多进程模型，每个进程响应一个请求；

worker：是多进程多线程模型，一个主进程生成多个子进程，每个子进程负责生个多个线程，每个线程响应一个请求；

event：事件驱动模型，每个线程响应n个请求；

6、配置fast-cgi模块

查看模块是否存在，注意我安装的是httpd2.4

[[email protected] conf.modules.d]# vim /etc/httpd/conf.modules.d/00-proxy.conf 
LoadModule proxy_fcgi_module modules/mod_proxy_fcgi.so

查看模块是否加载

[[email protected] conf]# vim /etc/httpd/conf/httpd.conf 
Include conf.modules.d/*.conf

7、修改httpd配置文件

[[email protected] conf]# vim /etc/httpd/conf/httpd.conf 
ServerRoot "/etc/httpd"    #服务器根目录位置配置文件中没有使用绝对路径的地方，都认为是在该目录下

Listen 80    #监听在80端口

Include conf.modules.d/*.conf    #加载/etc/httd/conf.modules.d/下的.conf文件，所有的模块都在其中

User apache    #访问httpd是进程使用的用户和组
Group apache

ServerAdmin [email protected]    #管理员邮箱

ServerName cs1.xinfeng.com:80    #主机名

<Directory />    #限制用户的目录访问权限
    AllowOverride none
    Require all denied
</Directory>

DocumentRoot "/var/www/html"    #url对应的根目录，这里cs1.xinfeng.com对应的就是这个目录

<Directory "/var/www">
    AllowOverride None
    # Allow open access:
    Require all granted    #all granted表示可无条件访问该目录
</Directory>

<Directory "/var/www/html">    #用于设定在该目录中哪些特性可用。默认这里有个Indexes选项，作用是当浏览器访问该目录如果该目录下没有默认网页(如index.html)，那么此时就会返回该目录下的文件名列表，所以建议取消掉
    Options none
    AllowOverride None
    Require all granted
</Directory>

<IfModule dir_module>    #对指定的模块进行处理，
    DirectoryIndex index.php index.html
</IfModule>

<Files ".ht*">    #任意目录下，文件名符合.ht*的文件都会被禁止访问。
    Require all denied
</Files>

ErrorLog "logs/error_log"    #错误日志所在位置/etc/httpd/logs/error_log 

LogLevel warn    #错误日志级别

<IfModule log_config_module>
    LogFormat "%h %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\"" combined
    LogFormat "%h %l %u %t \"%r\" %>s %b" common
    <IfModule logio_module>
      # You need to enable mod_logio.c to use %I and %O
      LogFormat "%h %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\" %I %O" combinedio
    </IfModule>
    CustomLog "logs/access_log" combined    #访问日志的格式和纪录位置
</IfModule>

<IfModule alias_module>    #ScriptAlias会将URL路径映射到指定目录，并且让该目录具有CGI脚本执行权限（因此CGI脚本都可放置在该目录下）。
    ScriptAlias /cgi-bin/ "/var/www/cgi-bin/"
</IfModule>

<Directory "/var/www/cgi-bin">    #用于设定在该目录中哪些特性可用
    AllowOverride None
    Options None
    Require all granted
</Directory>

<IfModule mime_module>    #关于mime模块的设置
    TypesConfig /etc/mime.types
    AddType application/x-compress .Z
    AddType application/x-gzip .gz .tgz
    AddType text/html .shtml
    AddOutputFilter INCLUDES .shtml
    
    AddType application/x-httpd-php  .php    #让apache能识别php格式的页面
    AddType application/x-httpd-php-source  .phps
</IfModule>

AddDefaultCharset UTF-8    #支持的编码格式为UTF-8

<IfModule mime_magic_module>    
    MIMEMagicFile conf/magic
</IfModule>

EnableSendfile on    #允许Apache使用系统核心支持的sendfile来传送文件给客户端 

ProxyRequests Off    #关闭正向代理
ProxyPassMatch ^/(.*\.php)$ fcgi://127.0.0.1:9000/var/www/html/$1    #把以.php结尾的文件请求发送到php-fpm进程

IncludeOptional conf.d/*.conf    #在/etc/httpd/conf.d目录下以.conf结尾的配置文件也会被读取

[[email protected] ~]# httpd -t    #检查语法
[[email protected] conf.modules.d]# vim /var/www/html/index.php    #创建一个php文件
<?php
        phpinfo();
?>
[[email protected] conf.modules.d]# systemctl start httpd

8、安装配置php-fpm

[[email protected] ~]# yum install php-fpm -y
[[email protected] ~]# vim /etc/php-fpm.d/www.conf 
listen = 127.0.0.1:9000    #确保监听在9000端口
listen.allowed_clients = 127.0.0.1
[[email protected] ~]# systemctl start php-fpm
[[email protected] conf.modules.d]# getenforce    #确保selinux关闭
Disabled
[[email protected] conf.modules.d]# iptables -F    #清空防火墙规则
[[email protected] conf.modules.d]# iptables -L

9、安装配置phpMyAdmin

[[email protected] ~]# yum install -y phpMyAdmin
[[email protected] ~]# yum install php-mbstring -y
[[email protected] libraries]# vim /usr/share/phpMyAdmin/libraries/config.default.php
#编辑配置文件
$cfg[‘PmaAbsoluteUri‘] = ‘http://172.16.23.211/phpMyAdmin/‘;  #这里要填入phpMyAdmin所在的路径，这里也可以写成‘http://cs1.xinfeng.com/phpMyAdmin/‘

[[email protected] html]# vim /etc/httpd/conf.d/phpMyAdmin.conf 
#修改一下几行
<Directory /usr/share/phpMyAdmin/>
   AddDefaultCharset UTF-8

   <IfModule mod_authz_core.c>
     # Apache 2.4
     <RequireAny>
#       Require ip 127.0.0.1
#       Require ip ::1
        Require all granted
<Directory /usr/share/phpMyAdmin/setup/>
   <IfModule mod_authz_core.c>
     # Apache 2.4
     <RequireAny>
#       Require ip 127.0.0.1
#       Require ip ::1
        Require all granted

        
[[email protected] ~]# vim /etc/phpMyAdmin/config.inc.php 
$cfg[‘blowfish_secret‘] = ‘1342758687478692‘;    #这里必须要给一个随机数

[[email protected] html]# ln -s /usr/share/phpMyAdmin /var/www/html/
#这是将phpMyAdmin链接至httpd的根目录

[[email protected] ~]# systemctl restart php-fpm
[[email protected] ~]# systemctl restart httpd

进入http://172.16.23.211/phpMyAdmin/    测试能不能打开

进入http://172.16.23.211/index.php    测试能不能打开

10、配置mysql

[[email protected] ~]# systemctl start mariadb
[[email protected] ~]# mysql
MariaDB [(none)]> create database php;    创建一个叫php的数据库
Query OK, 1 row affected (0.01 sec)
MariaDB [(none)]> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| mysql              |
| performance_schema |
| php                |
| test               |
+--------------------+
MariaDB [(none)]> grant all privileges on php.* to [email protected]‘%‘ identified by ‘123‘;    #创建一个xxoo用户密码为123，授权给php库，授权范围为全网
Query OK, 0 rows affected (0.01 sec)
MariaDB [(none)]> grant all privileges on php.* to [email protected] identified by ‘123‘;    #授权范围本地
Query OK, 0 rows affected (0.00 sec)
MariaDB [(none)]> flush privileges;    #刷新权限
Query OK, 0 rows affected (0.00 sec)

11、重启httpd,php-fpm，mariadb进入phpMyadmin测试

[[email protected] ~]# service php-fpm restart
[[email protected] ~]# service httpd restart
[[email protected] ~]# service mariadb restart

二、基于lamp安装wordpress

1、安装httpd（172.16.23.213）

[[email protected] ~]# yum install httpd -y

2、安装php（172.16.23.213）

[[email protected] ~]# yum install php -y

3、安装php-mysql（172.16.23.213）

[[email protected] ~]# yum install -y php-mysql

4、安装mariadb（172.16.23.213 CentOS7）

[[email protected] ~]# yum install -y mariadb-server

5、安装php-fpm

[[email protected] ~]# yum install php-fpm -y

6、安装phpMyAdmin

[[email protected] ~]# yum install -y phpMyAdmin
[[email protected] ~]# yum install php-mbstring -y

7、配置和上面的lamp相同，不创建index.php

8、下载安装配置wordpress

[[email protected] ~]# wget 
[[email protected] ~]# tar xvf latest.tar.gz  
[[email protected] ~]# ls
anaconda-ks.cfg  latest.tar.gz  wordpress
[[email protected] ~]# chown root:root /root/wordpress    #改权限
[[email protected] ~]# chown root:root /root/wordpress/*
[[email protected] html]# cp -a /root/wordpress/* /var/www/html/    #将所有文件都复制到documentroot下
[[email protected] html]# vim wp-config-sample.php    #修改配置文件
#我直接使用了php数据库，你也可以根据需要自己创建
define(‘DB_NAME‘, ‘php‘);

#数据库用户名xxoo
define(‘DB_USER‘, ‘xxoo‘);

#数据库密码123
define(‘DB_PASSWORD‘, ‘123‘);

#数据库位置，这里我安装的是本地，也可以指向其他有数据库的地址
define(‘DB_HOST‘, ‘127.0.0.1‘);

[[email protected] html]# cp wp-config-sample.php wp-config.php
[[email protected] html]# service httpd restart
[[email protected] html]# service php-fpm restart

9、安装wordpress

在phpmyadmin中给wordpress创建一个数据库，这里我创建的数据库是之前在mysql中创建的php，并且授权给了用户xxoo的

三、基于lamp安装DiscuzX

1、安装httpd（172.16.23.215）

[[email protected] ~]# yum install httpd -y

2、安装php（172.16.23.215）

[[email protected] ~]# yum install php -y

3、安装php-mysql（172.16.23.215）

[[email protected] ~]# yum install -y php-mysql

4、安装mariadb（172.16.23.215 CentOS7）

[[email protected] ~]# yum install -y mariadb-server

5、安装php-fpm

[[email protected] ~]# yum install php-fpm -y

6、安装phpMyAdmin

[[email protected] ~]# yum install -y phpMyAdmin
[[email protected] ~]# yum install php-mbstring -y

7、配置方法和lamp一样，不创建index.php

8、下载解压配置DiscuzX

[[email protected] ~]# wget 
[[email protected] ~]# ls
anaconda-ks.cfg  Discuz_X3.2_SC_UTF8.zip
[[email protected] ~]# mkdir Discuz
[[email protected] ~]# unzip -d /root/Discuz/ Discuz_X3.2_SC_UTF8.zip
[[email protected] ~]# cp -a /root/Discuz/* /var/www/html/
[[email protected] html]# chmod -R 777 /var/www/html/upload/*

9、进入首页进行配置，注意url

这里因为后续我要用lvs做负载均衡，所以需要把documentroot改一下

[[email protected] html]# vim /etc/httpd/conf/httpd.conf 
DocumentRoot "/var/www/html/upload"
<Directory "/var/www/html/upload">
ProxyPassMatch ^/(.*\.php)$ fcgi://127.0.0.1:9000/var/www/html/upload/$1

[[email protected] html]# httpd -t
Syntax OK

[[email protected] html]# rm phpmyadmin
[[email protected] html]# ln -s /usr/share/phpMyAdmin/ /var/www/html/upload/phpmyadmin
[[email protected] html]# service httpd restart
[[email protected] html]# service php-fpm restart
[[email protected] html]# service mariadb restart

改了之后的效果

四、keepalive实现lvs-dr

1、配置phpinfp（192.168.1.107）

#让服务器忽略来自客户端计算机的ARP广播请求，防止服务器回答来自客户端查找VIP的ARP广播
#接口可根据实际情况来定义，我这里用的本地回环接口
[[email protected] ~]# vim set.sh
#!/bin/bash
case $1 in
start)
        echo 1 > /proc/sys/net/ipv4/conf/all/arp_ignore
        echo 1 > /proc/sys/net/ipv4/conf/lo/arp_ignore
        echo 2 > /proc/sys/net/ipv4/conf/all/arp_announce
        echo 2 > /proc/sys/net/ipv4/conf/lo/arp_announce
        ;;
stop)
        echo 0 > /proc/sys/net/ipv4/conf/all/arp_ignore
        echo 0 > /proc/sys/net/ipv4/conf/lo/arp_ignore
        echo 0 > /proc/sys/net/ipv4/conf/all/arp_announce
        echo 0 > /proc/sys/net/ipv4/conf/lo/arp_announce
        ;;
esac
[[email protected] ~]# bash set.sh start
#将脚本传给另外wordpress和Discuz
[[email protected] ~]# scp set.sh 192.168.1.114:/root/
[[email protected] ~]# scp set.sh 192.168.1.113:/root/
#修改lo接口的ip地址为VIP
[[email protected] ~]# ifconfig lo:0 192.168.1.33/32 broadcast 192.168.1.33 up
#添加路由规则
[[email protected] ~]# route add -host 192.168.1.33 dev lo:0

2、配置wordpress(192.168.1.114)

[[email protected] ~]# bash set.sh start
#修改lo接口的ip地址为VIP
[[email protected] ~]# ifconfig lo:0 192.168.1.33/32 broadcast 192.168.1.33 up
#添加路由规则
[[email protected] ~]# route add -host 192.168.1.33 dev lo:0

3、配置Discuz（192.168.1.113）

[[email protected] ~]# bash set.sh start
#修改lo接口的ip地址为VIP
[[email protected] ~]# ifconfig lo:0 192.168.1.33/32 broadcast 192.168.1.33 up
#添加路由规则
[[email protected] ~]# route add -host 192.168.1.33 dev lo:0

4、配置director1（192.168.1.112）

#安装ipvsadm工具
[[email protected] ~]# yum install -y ipvsadm

#安装配置keepalived
[[email protected] ~]# yum install keepalived
[[email protected] ~]# cp /etc/keepalived/keepalived.conf{,.bak}
[[email protected] ~]# vim /etc/keepalived/keepalived.conf
! Configuration File for keepalived

global_defs {
   notification_email {
        [email protected]    #修改邮箱地址
   }
   notification_email_from [email protected]
   smtp_server 127.0.0.1    #修改smtp地址
   smtp_connect_timeout 30
   router_id LVS_DEVEL
}

vrrp_instance VI_1 {
    state MASTER    #设为主服务器
    interface eth0    #端口为et0
    virtual_router_id 51    #虚拟路由id为51
    priority 100    #优先级为100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 68978103    #给以个随机数
    }
    virtual_ipaddress {
        192.168.1.33/32    #VIP地址
    }
}

virtual_server 192.168.1.33 80 {    #定义VIP
    delay_loop 6
    lb_algo rr    #lvs算法为rr
    lb_kind DR    #lvs模式为DR
    nat_mask 255.255.255.255    #子网掩码
    protocol TCP

    real_server 192.168.1.107 80 {    #phpinfo的地址
        weight 1    #权重为1
        TCP_CHECK {   #使用HTTP方式测试
            connect_timeout 3    
            nb_get_retry 3
            delay_before_retry 3
            connect_port 80    #检测80端口
        }
    }

    real_server 192.168.1.114 80 {    #wordpress的地址
        weight 1
        TCP_CHECK { 
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
            connect_port 80
        }
    }

    real_server 192.168.1.113 80 {    #discuz的地址
        weight 1
        TCP_CHECK { 
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
            connect_port 80
        }
    }
}

#将编辑好的keepalived.conf传给lvs2（192.168.1.111）
[[email protected] ~]# scp /etc/keepalived/keepalived.conf 192.168.1.111:/etc/keepalived/
#启动keepalived
[[email protected] ~]# service keepalived start

5、配置director2（192.168.1.111）

#安装keepalived
[[email protected] ~]# yum install keepalived
#编辑刚才从director1传来的配置文件中的2项即可
[[email protected] ~]# vim /etc/keepalived/keepalived.conf
vrrp_instance VI_1 {
    state BACKUP    #这里改为BACKUP
    interface eth0
    virtual_router_id 51
    priority 99    #这里将优先级改为99
#启动keepalived
[[email protected] ~]# service keepalived start

6、使用tcpdump抓包查看

#使用tcpdump抓包查看是否成功
[[email protected] ~]# tcpdump -i eth0 -nn host 192.168.1.111
tcpdump: verbose output suppressed, use -v or -vv for full protocol decode
listening on eth0, link-type EN10MB (Ethernet), capture size 65535 bytes
05:57:17.255964 ARP, Request who-has 192.168.1.111 tell 192.168.1.113, length 46
05:57:17.255975 ARP, Reply 192.168.1.111 is-at 00:0c:29:63:cc:d8, length 46
05:57:18.243218 IP 192.168.1.111.38941 > 192.168.1.113.80: Flags [S], seq 468244056, win 14600, options [mss 1460,sackOK,TS val 17008837 ecr 0,nop,wscale 5], length 0
05:57:18.243230 IP 192.168.1.113.80 > 192.168.1.111.38941: Flags [S.], seq 137965257, ack 468244057, win 28960, options [mss 1460,sackOK,TS val 45829659 ecr 17008837,nop,wscale 6], length 0
05:57:18.243417 IP 192.168.1.111.38941 > 192.168.1.113.80: Flags [.], ack 1, win 457, options [nop,nop,TS val 17008838 ecr 45829659], length 0
05:57:18.243503 IP 192.168.1.111.38941 > 192.168.1.113.80: Flags [R.], seq 1, ack 1, win 457, options [nop,nop,TS val 17008838 ecr 45829659], length 0
05:57:20.563328 IP 192.168.1.111.44763 > 192.168.1.107.80: Flags [S], seq 1861279836, win 14600, options [mss 1460,sackOK,TS val 17011157 ecr 0,nop,wscale 5], length 0
05:57:20.563338 IP 192.168.1.107.80 > 192.168.1.111.44763: Flags [S.], seq 1361632953, ack 1861279837, win 28960, options [mss 1460,sackOK,TS val 45255624 ecr 17011157,nop,wscale 6], length 0
05:57:20.563500 IP 192.168.1.111.44763 > 192.168.1.107.80: Flags [.], ack 1, win 457, options [nop,nop,TS val 17011158 ecr 45255624], length 0
05:57:20.563504 IP 192.168.1.111.44763 > 192.168.1.107.80: Flags [R.], seq 1, ack 1, win 457, options [nop,nop,TS val 17011158 ecr 45255624], length 0
05:57:20.917067 IP 192.168.1.111.57732 > 192.168.1.114.80: Flags [S], seq 950098347, win 14600, options [mss 1460,sackOK,TS val 17011511 ecr 0,nop,wscale 5], length 0
05:57:20.917506 IP 192.168.1.114.80 > 192.168.1.111.57732: Flags [S.], seq 145530752, ack 950098348, win 28960, options [mss 1460,sackOK,TS val 45926618 ecr 17011511,nop,wscale 6], length 0
05:57:20.918642 IP 192.168.1.111.57732 > 192.168.1.114.80: Flags [.], ack 1, win 457, options [nop,nop,TS val 17011512 ecr 45926618], length 0
05:57:20.918650 IP 192.168.1.111.57732 > 192.168.1.114.80: Flags [R.], seq 1, ack 1, win 457, options [nop,nop,TS val 17011513 ecr 45926618], length 0
#查看ip是否配置成功
[[email protected] ~]# ip addr
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 16436 qdisc noqueue state UNKNOWN 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:52:50:3e brd ff:ff:ff:ff:ff:ff
    inet 192.168.1.112/24 brd 192.168.1.255 scope global eth0
    inet 192.168.1.33/32 scope global eth0
    inet6 fe80::20c:29ff:fe52:503e/64 scope link 
       valid_lft forever preferred_lft forever
#用ipvsadm查看规则是否添加成功
[[email protected] ~]# ipvsadm -L -n
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.1.33:80 rr
  -> 192.168.1.107:80             Route   1      0          0         
  -> 192.168.1.113:80             Route   1      0          0         
  -> 192.168.1.114:80             Route   1      0          0
#我停掉192.168.1.112这台lvs1的keepalived服务实验一下
[[email protected] ~]# service keepalived stop
#进入192.168.1.111查看
[[email protected] ~]# ip addr
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 16436 qdisc noqueue state UNKNOWN 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:63:cc:d8 brd ff:ff:ff:ff:ff:ff
    inet 192.168.1.111/24 brd 192.168.1.255 scope global eth0
    inet 192.168.1.33/32 scope global eth0
    inet6 fe80::20c:29ff:fe63:ccd8/64 scope link 
       valid_lft forever preferred_lft forever
You have new mail in /var/spool/mail/root

#可以看到地址成功切换出去了

7、分别停到phpinfo、wordpress、discuz的httpd服务测试一下

停掉192.168.1.107和192.168.1.113的httpd

停掉192.168.1.114和192.168.1.113的httpd

停掉192.168.1.107和192.168.1.114的httpd

测试成功

五、keepalive实现lvs-nat

1、配置phpinfo（172.16.23.211）

#配置网关
[[email protected] ~]# route add default gw 172.16.23.10
[[email protected] ~]# bash set.sh start

2、配置wordpress（172.16.23.213）

#配置网关
[[email protected] ~]# route add default gw 172.16.23.10
[[email protected] ~]# bash set.sh start

3、配置discuz（172.16.23.215）

#配置网关
[[email protected] ~]# route add default gw 172.16.23.10
[[email protected] ~]# bash set.sh start

4、配置director1(172.16.25.24)

#打开路由转发
[[email protected] ~]# echo "1">/proc/sys/net/ipv4/ip_forward
[[email protected] ~]# vim /etc/sysctl.conf
net.ipv4.ip_forward = 1
[[email protected] ~]# sysctl -p
#开起第二个网卡
[[email protected] ~]#ifconfig eth1 up
#配置keepalived
[[email protected] ~]# vim /etc/keepalived/keepalived.conf
! Configuration File for keepalived

global_defs {
   notification_email {
        [email protected]
   }
   notification_email_from [email protected]
   smtp_server 127.0.0.1
   smtp_connect_timeout 30
   router_id LVS_1
}
vrrp_sync_group VG_1 {    #注意这里将DIP的别名和VIP定义为一个组，这样才能使两个地址同进退
    group {
        VI_1
        VI_2
        }
}
vrrp_instance VI_1 {    #这里定义VIP
    state MASTER
    interface eth1
    virtual_router_id 53
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 68978103
    }
    virtual_ipaddress {
        172.16.23.33
    }
}
vrrp_instance VI_2 {    #这里定义DIP别名
    state MASTER
    interface eth0
    virtual_router_id 63
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 68978103
    }
    virtual_ipaddress {
        172.16.23.10
    }
}
virtual_server 172.16.23.33 80 {
    delay_loop 6
    lb_algo wrr
    lb_kind NAT
    nat_mask 255.255.255.255
    protocol TCP

    real_server 172.16.23.211 80 {
        weight 1
        TCP_CHECK {
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
            connect_port 80
        }
    }

    real_server 172.16.23.213 80 {
        weight 1
        TCP_CHECK {
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
            connect_port 80
        }
    }

    real_server 172.16.23.215 80 {
        weight 1
        TCP_CHECK {
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
            connect_port 80
        }
    }
}
#启动keepadlived
[[email protected] ~]# service keepalived start

5、配置director2(172.16.25.83)

[[email protected] ~]# echo "1">/proc/sys/net/ipv4/ip_forward
[[email protected] ~]# vim /etc/sysctl.conf
net.ipv4.ip_forward = 1
[[email protected] ~]# sysctl -p
[[email protected] ~]#ifconfig eth2 up
[[email protected] ~]# vim /etc/keepalived/keepalived.conf
! Configuration File for keepalived

global_defs {
   notification_email {
        [email protected]
   }
   notification_email_from [email protected]
   smtp_server 127.0.0.1
   smtp_connect_timeout 30
   router_id LVS_2
}
vrrp_sync_group VG_1 {
    group {
        VI_1
        VI_2
        }
}
vrrp_instance VI_1 {
    state BACKUP
    interface eth2
    virtual_router_id 53
    priority 99
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 68978103
    }
    virtual_ipaddress {
        172.16.23.33
    }
}
vrrp_instance VI_2 {
    state BACKUP
    interface eth0
    virtual_router_id 63
    priority 99
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 68978103
    }
    virtual_ipaddress {
        172.16.23.10
    }
}
virtual_server 172.16.23.33 80 {
    delay_loop 6
    lb_algo wrr
    lb_kind NAT
    nat_mask 255.255.255.255
    protocol TCP

    real_server 172.16.23.211 80 {
        weight 1
        TCP_CHECK {
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
            connect_port 80
        }
    }

    real_server 172.16.23.213 80 {
        weight 1
        TCP_CHECK {
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
            connect_port 80
        }
    }

    real_server 172.16.23.215 80 {
        weight 1
        TCP_CHECK {
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
            connect_port 80
        }
    }
}

                                            
#启动keepalived
[[email protected] ~]# service keepalived start

6、查看是否配置成功

[[email protected] ~]# ipvsadm -L -n
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  172.16.23.33:80 wrr
  -> 172.16.23.211:80             Masq    1      0          0         
  -> 172.16.23.213:80             Masq    1      0          0         
  -> 172.16.23.215:80             Masq    1      0          0
[[email protected] ~]# ip addr
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 16436 qdisc noqueue state UNKNOWN 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:52:50:3e brd ff:ff:ff:ff:ff:ff
    inet 172.16.25.24/16 brd 172.16.255.255 scope global eth0
    inet 172.16.23.33/32 scope global eth0
    inet6 fe80::20c:29ff:fe52:503e/64 scope link 
       valid_lft forever preferred_lft forever
3: eth1: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:52:50:48 brd ff:ff:ff:ff:ff:ff
    inet 172.16.23.10/32 scope global eth1
    inet6 fe80::20c:29ff:fe52:5048/64 scope link 
       valid_lft forever preferred_lft forever
[[email protected] ~]# ip addr
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 16436 qdisc noqueue state UNKNOWN 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:63:cc:d8 brd ff:ff:ff:ff:ff:ff
    inet 172.16.25.83/16 brd 172.16.255.255 scope global eth0
    inet 172.16.23.33/32 scope global eth0
    inet6 fe80::20c:29ff:fe63:ccd8/64 scope link 
       valid_lft forever preferred_lft forever
3: eth2: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:63:cc:e2 brd ff:ff:ff:ff:ff:ff
    inet 172.16.23.10/32 scope global eth2
    inet6 fe80::20c:29ff:fe63:cce2/64 scope link 
       valid_lft forever preferred_lft forever
#可以看到已经可以自由转换了

六、keepalive实现lvs-tun

lvs-tun特点：

不修改请求报文的ip首部，而是通过在原有的ip首部（cip<-->vip）之外，再封装一个ip首部(dip<-->rip)

(1) RIP, DIP, VIP全得是公网地址

(2) RS的网关的不能指向DIP

(3) 请求报文必须经由director调度，但响应报文必须不能经由director

(4) 不支持端口映射

(5) RS的OS必须支持隧道功能

七、keepalive实现lvs-fullnat

lvs-fullnat特点：

director通过同时修改请求报文的目标地址和源地址进行转发

(1) VIP是公网地址；RIP和DIP是私网地址，二者无须在同一网络中

(2) RS接收到的请求报文的源地址为DIP，因此要响应给DIP

(3) 请求报文和响应报文都必须经由Director

(4) 支持端口映射机制

(5) RS可以使用任意OS

八、lvs调度算法

lvs调度算法分为两类，一类为静态算法，一类为动态算法。

静态算法：根据算法本身进行调度

RR：轮询

WRR：加权的轮询

SH：实现session保持的机制；将来自于同一个IP的请求始终调度至同一RS

DH：将对同一个目标的请求始终发往同一个RS

动态算法：根据算法及各RS的当前负载状态进行调度

LC：最少连接数，那台连接数最少就调度哪台

WLC：加权最少连接数

SED：最短期望延迟

NQ：SED算法的改进；

LBLC：动态的DH算法；

LBLCR：带复制功能的LBLC算法；

九、tcpdump的使用

tcpdump是一款抓包工具，用来监听指定网络接口的数据包流向

直接使用tcpdump会监听第一个网络接口的数据流向

选项：

-nn：直接以IP和端口号显示，而非主机名与服务名称
        -i ：后面接要监听的网络端口，例如eth0,lo等
        -w ：将监听的数据包结果储存下来，后面文件名
        -c ：监听的数据包数量，如果不接这个参数，tcpdump会持续不断的监听，直到输入ctrl+c为止
        -A ：数据包的内容以ASCII码显示，通常用来捉取网页数据包
        -e ：用mac地址来显示数据包
        -q ：仅列出较为简短的数据包结果，每一行的内容比较精简
        -X ：可以列出十六进制以及ASCII码的数据包内容，对于监听数据包内容很有用
        -r ：将之前存好的数据包文件读出来

关键字：

第一种是要监听的目标类型的关键字，主要包括host，net，port，如果不指定默认是host

第二种是确定传输方向的关键字，主要包括src（来源），dst（目标）

第三种是协议的关键字，主要包括fddi，ip，arp，rarp，tcp，udp

其他重要的关键字：gateway， broadcast，less， greater，

三种逻辑运算：

非：可以用not也可以用 !

与：可以用and也可以用&&

或：用or

#tcpdump -i eth0 -nn host 192.168.1.111
分析之前使用的这个命令
监听主机192.168.1.111的th0网卡所流过的所有数据包，显示数据包的ip和端口

十、总结

1、创建基于lamp的RS服务器

2、在DR服务器上用keepalived配置ipvs规则

keepalived是用来实现lvs高可用的，而lvs是用来实现RS服务器负载均衡的

3、利用tcpdump抓包来查看keepalived下lvs服务器的数据包的流向

时间： 2024-10-10 07:25:18

keepalived实现lvs高可用并负载均衡lamp的相关文章

高可用集群技术之keepalived实现lvs高可用并负载均衡web服务

Keepalived概述: Keepalived的作用是检测服务器的状态,如果有一台web服务器死机,或工作出现故障,Keepalived将检测到,并将有故障的服务器从系统中剔除,同时使用其他服务器代替该服务器的工作,当服务器工作正常后Keepalived自动将服务器加入到服务器群中,这些工作全部自动完成,不需要人工干涉,需要人工做的只是修复故障的服务器. keepalived实现lvs高可用并负载均衡web服务: 准备工作: 2台keepalived节点为: node1.samlee.com

利用lvs keepalived配置redis高可用及负载均衡

需求 我们用ES做日志服务,架构是 上游数据来源=>redis=>logstash=>ES redis目前还是单点, 没有做高可用, 现在数据量越来越多, 如果下游消费不出问题还好, redis里面数据来了就走,但是下游一旦出问题, 分给redis的内存半小时就撑满了. 看到redis3.0 beta版本已经提供了集群功能, 但是需要client以集群模式接入, 我们这么多上游用户, 不太可能统一要求他们改造. 公司也有硬件的LB, 同事在E公司的时候就是用的硬件LB. 但接入还要申请,

keepalived+nginx实现高可用and负载均衡集群

keepalived+nginx实现高可用and负载均衡集群 前言 因生产环境需要,现需要搭建一个前端为nginx的HA双向互备.后端为nginx代理的loadbalance负载均衡集群.nginx进程基于于Master+Slave(worker)多进程模型,自身具有非常稳定的子进程管理功能.在Master进程分配模式下,Master进程永远不进行业务处理,只是进行任务分发,从而达到Master进程的存活高可靠性,Slave(worker)进程所有的业务信号都 由主进程发出,Slave(work

keepalived+nginx搭建高可用and负载均衡集群

keepalived+nginx搭建高可用and负载均衡集群 前言 因生产环境需要,现需要搭建一个前端为nginx的HA双向互备.后端为nginx代理的loadbalance负载均衡集群.nginx进程基于于Master+Slave(worker)多进程模型,自身具有非常稳定的子进程管理功能.在Master进程分配模式下,Master进程永远不进行业务处理,只是进行任务分发,从而达到Master进程的存活高可靠性,Slave(worker)进程所有的业务信号都由主进程发出,Slave(worke

keepalived+LVS高可用的负载均衡

1.安装keepalived(在两台调度服务器上安装) vim /etc/yum.repo.d/rhel.repo [local-cdrom] name=local from cdrom baseurl=file:///mnt/ enable=1 gpgcheck=0 yum -y install kernel-devel openssl-devel popt-devel rpm -ivh /mnt/Packgets/ipvsadm-1.25-9.el6.i686.rpm tar zxvf ke

HAproxy+keepalived/pacemaker实现高可用，负载均衡技术

HAproxy+keepalived/pacemaker Haproxy+keepalived的结合,实现负载均衡与高可用的完美结合,既解决了提供服务的负载均衡,又解决了作负载均衡器的单点故障问题.这样架构就很健壮了. 材料准备: keepalived-1.2.20.tar.gz 步骤: #tar -zxf  keepalived-1.2.20.tar.gz    :解压源码包,进行编译安装 #cd   keepalived-1.2.20 #yum  install  -y  gcc  open

Keepalived + nginx 实现高可用web负载均衡 -- 配置文件

keepalived-master配置: ! Configuration File for keepalived global_defs { ## keepalived 自带的邮件提醒需要开启 sendmail 服务.建议用独立的监控或第三方 SMTP router_id debiao02 ## 标识本节点的字条串,通常为 hostname } ## keepalived 会定时执行脚本并对脚本执行的结果进行分析,动态调整 vrrp_instance 的优先级.如果 ## 脚本执行结果为 0,

keepalived双机实现高可用和负载均衡

安装keepalived # ./configure --sysconf=/etc --with-kernel-dir=/usr/src/kernels/2.6.32-358.el6.x86_64/ && make && make install #ln  -s  /usr/local/sbin/keepalived /sbin/ # chkconfig  keepalived  on 修改网卡配置 # vim /etc/sysconfig/network-scripts/

LVS专题: LVS+Keepalived并使用DNS轮询实现Director的高可用和负载均衡

LVS专题: LVS+Keepalived并使用DNS轮询实现Director的高可用和负载均衡 前言 LVS专题写到第三篇了, 前两篇我们对LVS的基础使用也有了一些了解, 这篇我们将做一个比较复杂的实验, 话不多说, 开始吧! 什么是KeepAlived What is Keepalived ? Keepalived is a routing software written in C. The main goal of this project is to provide simple a