前提:
客户机 : eth0 192.168.0.200 eth1 192.168.205.129
dir主机: eth0 192.168.0.166 eth1 192.168.205.128
rs1主机: eth0 192.168.0.207
rs2主机: eth0 192.168.0.208
rs1 和 rs2的网关是dir 192.168.0.166
常用的负载均衡开源软件有: nginx、lvs、keepalived
商业的硬件负载设备: F5、Netscale
1. LB、LVS介绍LB集群是load balance 集群的简写,翻译成中文就是负载均衡集群
LVS是一个实现负载均衡集群的开源软件项目
LVS架构从逻辑上可分为调度层(Director)、server集群层(Real server)和共享存储层
LVS可分为三种工作模式: ( dr模式参考这篇文章 http://os.51cto.com/art/201105/264303.htm 这篇介绍的还是挺详细的: http://www.it165.net/admin/html/201401/2248.html )
NAT(调度器将请求的目标ip即vip地址改为Real server的ip, 返回的数据包也经过调度器,调度器再把源地址修改为vip)
TUN(调度器将请求来的数据包封装加密通过ip隧道转发到后端的real server上,而real server会直接把数据返回给客户端,而不再经过调度器)
DR(调度器将请求来的数据包的目标mac地址改为real server的mac地址,返回的时候也不经过调度器,直接返回给客户端)
种IP:DIP(driector ip), VIP(virtual ip), RIP(Real IP). 其中DIP, RIP 为同一个网段,并且为私网IP, vip为对外提供服务的ip,Director, Real server上都设置vip
LVS的调度算法:轮叫调度(Round Robin)(简称rr) ,加权轮叫(Weighted Round Robin)(简称wrr),最少链接(least connection)(LC),加权最少链接(Weighted Least Connections)(WLC) 等等 (其他算法,参考 http://www.aminglinux.com/bbs/thread-7407-1-1.html)
2. LVS/NAT 配置
三台服务器一台作为director, 两台作为real server
Director 有一个外网ip (192.168.31.166) 和一个内网ip(192.168.21.166), 两个real server上只有内网ip(192.168.21.100)和(192.168.21.101) 并且需要把两个real server的内网网关设置为director的内网ip(192.168.21.166)
两个real server 上都安装httpd: yum install -y nginx
Director上安装ipvsadm yum install -y ipvsadm
Direcotr 上 vim /usr/local/sbin/lvs_nat.sh //增加:
[[email protected] ~]# vim /usr/local/sbin/lvs_nat.sh
#! /bin/bash
# director 服务器上开启路由转发功能:
echo 1 > /proc/sys/net/ipv4/ip_forward
# 关闭icmp的重定向
echo 0 > /proc/sys/net/ipv4/conf/all/send_redirects
echo 0 > /proc/sys/net/ipv4/conf/default/send_redirects
echo 0 > /proc/sys/net/ipv4/conf/eth0/send_redirects
echo 0 > /proc/sys/net/ipv4/conf/eth1/send_redirects
# director 设置nat防火墙
iptables -t nat -F
iptables -t nat -X
iptables -t nat -A POSTROUTING -s 192.168.0.0/24 -j MASQUERADE
# director设置ipvsadm
IPVSADM=‘/sbin/ipvsadm‘
$IPVSADM -C
$IPVSADM -A -t 192.168.205.128:80 -s rr
$IPVSADM -a -t 192.168.205.128:80 -r 192.168.0.207:80 -m -w 1
$IPVSADM -a -t 192.168.205.128:80 -r 192.168.0.208:80 -m -w 1
直接运行这个脚本就可以完成lvs/nat的配置了:
/bin/bash /usr/local/sbin/lvs_nat.sh
加n就可以看打开具体的ip是多少
rs1上
[email protected] ~]# ifdown eth0;ifup eth0;
rs2机器上
通RS1
通过浏览器测试两台机器上的web内容,为了区分开,我们可以把nginx的默认页修改一下:
rs1上: echo "111111master" >/usr/share/nginx/html/index.html
rs2上: echo "111111salve" >/usr/share/nginx/html/index.html
问题:
之前在发现一个问题就是在curl的时候一直在rs2上在curl的时候一直卡在那里。所以说一直不成功。后来在在群里人帮助下终于找到问题的所在。示默认网关的问题。
也就是rs1上默认网关有两个。删除一个即可。
route del default gw 192.168.0.1删掉这个默认网关
然后在dir上测试:
或者改变权重
[[email protected] ~]# vim /usr/local/sbin/lvs_nat.sh
然后/bin/sh /usr/local/sbin/lvs_nat.sh
我找了另一台机器(也就是第四台机器客户机)
客户机 : eth0 192.168.0.200 eth1 192.168.205.129
dir主机: eth0 192.168.0.166 eth1 192.168.205.128
rs1主机: eth0 192.168.0.207
rs2主机: eth0 192.168.0.208
第四台机器测试: