初识LVS(二)——LVS的DR工作模式

LVS的DR模式介绍

LVS在NAT模式下所有的请求和响应报文都需要经过director,尽管LVS工作在内核层不受套接字文件65535的数量限制,但也有可能会成为性能瓶颈(如视频网站),以下介绍LVS的另一种工作模式——dr模式,它是LVS默认的工作模式。与nat模式通过单边修改源或目标的IP地址实现负载均衡功能不同,dr模式则是通过修改mac地址来实现该功能,整个过程中源和目标的IP地址不发生变法。

LVS的dr模式工作原理

与nat模式下LVS负载均衡器充当内网中RS服务器的网关不同,dr模式下LVS负载均衡器和RS主机各自只需要一块网卡并接在同一个交换机下

我们将客户端向服务器端发出请求,经过网络上路由器层层转发后,到达LVS服务器所在网络的接口IP地址设为CIP,此时数据报文中源地址是CIP;目标地址是VIP

由于本地网络中计算机之间是通过mac地址进行通信,此时路由器的CIP接口会向本地网络发出广播索要VIP接口的mac地址,VIP接口接收到广播后上报自己的mac地址,数据报文在IP地址上再封装一层mac地址后发送给LVS负载均衡器

LVS负载均衡器在接收到请求后拆掉mac地址,根据设置的调度规则,选定一个服务器(以服务器1为例),并将目标mac地址改为RIP1的mac地址后发还给路由器的CIP接口,此处需要注意的是director只能通过DIP与realserver通信,所以LVS负载均衡器上同时还要配置一个DIP地址

路由器的CIP接口在接收到修改过目标mac地址的报文后从新将数据报发给新mac地址所对应的服务器1,当服务器1接收到请求后拆掉mac报发现请求的地址是VIP,所以realserver上还需要配置VIP地址,否则请求将会被丢弃,且realserver的VIP地址绑在回环接口上,避免地址发生冲突,与此同时又引入一个新问题:在之前过程中广播寻找VIP地址时director和realserver都会相应,通过修改realserver内核参数避免这种情况的产生

服务器处理完请求后直接将结果返回给客户端而不再经过director

arp抑制功能

realserver为了避免在本地网络中广播索要VIP的mac地址时,需要修改内核参数开启arp抑制功能,修改的参数是arp_announce和arp_ignore,下面分别进行说明。

1.arp_announce

主动向外通告计算机所有的IP地址,arp_announce有0、1、2三个值,0为默认值,如下图所示,1.1会向1.2通告所有的IP地址包括2.1和3.1,同理2.1和3.1也会向各自所在的网段通告本机所有的IP,由于realserver不能和director去抢着响应VIP的广播,所以在realserver上需要将arp_announce值设置为2

2.arp_ignore

请求从哪个接口进来该接口才做出响应,其余接口不做响应,以上图为例,请求从1.1接口进来,所以只有1.1接口做出回应,2.1和3.1接口不做响应,arp_ignore有9个值,0为默认值,如下图所示,此处需要将arp_ignore值设置为1,另外需要注意的是arp抑制的操作应在给realserver设置VIP之前完成

总结

1.lvs-dr模式它通过修改请求报文的目标MAC地址进行转发,请求报文经由director调度,响应报文不经过director

2.director上配置DIP和VIP,realserver上配置RIP和VIP,同时启用realserver的arp抑制功能

3.realserver跟director必须在同一物理网络中,可以是不同的vlan,只要中间没有路由设备;RS的RIP可以使用私有地址但也可以使用公网地址

4.因为响应报文不经过director,所以不支持端口映射;

5.realserver可以大多数支持设置arp抑制的系统;

6.realserver的网关不能指向DIP

操作步骤

网络拓扑

LVS负载均衡器和web服务器系统版本均为CentOS6.8,LVS负载均衡器有1张网卡,VIP地址配置在本地接口别名上,安装ipvsadm作为director,web服务器为realserver,安装httpd提供页面服务,VIP配置在本地回环接口别名上,此处便于演示效果让2台web服务器页面不一致,安装步骤省却。

操作步骤

1.将VIP地址设置在director本地接口别名或回环接口上(本地网络中是通过广播寻找VIP地址,所以在那个接口无所谓,如果使用ip addr add命令可以直接在eth0上设置多个地址),并查看是否生效

2.指定LVS的director服务器,并选择调度模式;指定realserver服务器并设置数据转发类型,查看设置是否生效

3.保存ipvsadm当前配置,指定一个保存文件,便于清理后从该文件恢复配置

4.realserver服务器做arp抑制,抑制时注意将所有端口都要进行设置,除了all之外由于RIP是设置在eth0上与外部通信,所以也要进行设置

5.将VIP配置在realserver的回环地址上,并添加路由,要求前往172.16.10.100的流量必须从经过lo:0接口。如果使用ip addr add命令可以直接在eth0或lo上设置,且不需要添加路由

6.确认realserver的网关一定不能指向DIP,至此操作全部完成

补充说明

本地接口和回环接口

本地接口是一个真实的物理接口,自身有mac地址;而会换接口是一个逻辑接口没有mac地址。本地接口别名和本地接口可以是不同的IP地址,但使用相同的mac地址;而回环接口和回环地址别名有不同的IP地址,但都没有mac地址。

所以当director将目标mac地址更改完后realserver是通过RIP的接口接收到,发现mac地址就是自己的本地接口后拆掉mac地址,发现目标IP是VIP,而VIP配置在环回地址的别名上,所以此时需要使用route add -host 172.16.10.100 dev lo:0

而当数据报文返回时由于是从RIP接口进来应该直接由RIP接口返回,但是客户端请求的是VIP的地址,此时又强行让数据报文先经过VIP,整个lvs-dr模式工作流程如下:

1.客户端向VIP地址发起请求

2.本地网络通过广播形式寻找VIP的mac地址,director进行响应并接受请求

3.director根据设置的调度规则选定一个负责处理的realserver,并将目标mac地址改为对应realserver的mac地址

4.按照新的目标mac地址重新发出请求,RIP接口发现目标mac地址就是自己拆封后发现目标IP是本地回环接口上的IP,交由本地回环接口处理

5.由于数据报文时从物理接口流入,守护进程处理完后交由物理接口返还客户端

6.但此时物理接口上的IP为RIP并不是客户端请求的VIP,所以数据报文被强行指向VIP的环回接口

7.回环接口封装完IP地址后再封装物理接口的mac地址,将结果返回客户端

时间: 2024-10-22 02:38:39

初识LVS(二)——LVS的DR工作模式的相关文章

LVS负载均衡器NAT和DR工作模式详解

在试验之前为了更好理解设置的参数,所以先讲解一下命令. 一.lvs配置文件和命令: 程序包:ipvsadm(LVS管理工具) 配置文件:/etc/sysconfig/ipvsadm-config [rpm -ql ipvsadm  查询包的具体列表] -A  在服务器列表中新添加一条新的虚拟服务器记录 -t 表示为tcp服务 -u 表示为udp服务 -s 使用的调度算法  (rr|wrr|wlc|lc|dh|sh|lblb|lblcr -a 在服务器里添加一条新的真是主机记录 -m 说明lvs提

初识LVS(三)——DR工作模式实际环境中的应用

背景介绍 LVS的NAT模型所有的请求和响应报文会经过director,此时director就成为了性能瓶颈,而为了解决这个问题LVS也默认采用的是DR模型(下图),请求报文(蓝色)向director发出请求,响应报文(红色)由RS服务器直接返还给用户不经由director,通常RS的网关都是指向IDC机房的出口路由,这样性能比通过director要好很多.VIP为公网IP地址,RIP和DIP需要连接在同一物理交换设备上,只要中间没有隔路由器,即使不是同一网段也可以,大多数情况RIP和DIP都位

LVS负载均衡(LVS简介、三种工作模式、十种调度算法)《转》

一.LVS简介 LVS(Linux Virtual Server)即Linux虚拟服务器,是由章文嵩博士主导的开源负载均衡项目,目前LVS已经被集成到Linux内核模块中.该项目在Linux内核中实现了基于IP的数据请求负载均衡调度方案,其体系结构如图1所示,终端互联网用户从外部访问公司的外部负载均衡服务器,终端用户的Web请求会发送给LVS调度器,调度器根据自己预设的算法决定将该请求发送给后端的某台Web服务器,比如,轮询算法可以将外部的请求平均分发给后端的所有服务器,终端用户访问LVS调度器

LVS调度器中NAT工作模式实验

LVS群集创建与管理使用ipvsadm工具Network File System,网络文件系统 依赖于RPC(远端过程调用) 需要安装nfs-utils.rpcbind软件包 系统服务:nfs.rpcbind 共享配置文件:/etc/exports案例环境 LVS调度器作为web服务器池的网关,LVS两块网卡,分别连接内外网,使用轮询(rr)调度算法实验案例图实验过程一.配置NFS存储服务器,提供存储空间1.首先为nfs服务器添加两块硬盘2.添加硬盘后重启服务器3.为每台服务器修改主机名,方便识

LVS负载均衡(LVS简介、三种工作模式、、调度原理以及十种调度算法)

LVS简介 LVS(Linux Virtual Server)即Linux虚拟服务器,是由章文嵩博士主导的开源负载均衡项目,目前LVS已经被集成到Linux内核模块中.该项目在Linux内核中实现了基于IP的数据请求负载均衡调度方案,其体系结构如图1所示,终端互联网用户从外部访问公司的外部负载均衡服务器,终端用户的Web请求会发送给LVS调度器,调度器根据自己预设的算法决定将该请求发送给后端的某台Web服务器,比如,轮询算法可以将外部的请求平均分发给后端的所有服务器,终端用户访问LVS调度器虽然

实战Java虚拟机之二“虚拟机的工作模式”

今天开始实战Java虚拟机之二:"虚拟机的工作模式". 总计有5个系列 实战Java虚拟机之一"堆溢出处理" 实战Java虚拟机之二"虚拟机的工作模式" 实战Java虚拟机之三"G1的新生代GC" 实战Java虚拟机之四"禁用System.gc()" 实战Java虚拟机之五"开启JIT编译" 目前的Java虚拟机支持Client和Server两种运行模式.使用参数-client可以指定使

Apache优化、安装部署及工作模式

博文大纲: 一.安装Apache2.4版本: 二.Apache服务的三种工作模式详解: 三.修改apache的工作模式: 四.apache工作模式的优化与修改: 五.进程与线程的区别. apache是一个模块化设计的服务,所谓的模块化就是将各个功能,特性都独立的分开,这样设计的好处是可扩展性强,各个功能之间的依赖性相对较弱,在后期修改,升级,添加新功能是非常方便.不同的模块可以静态的编译进程序,也可以被动态加载.动态加载是apache的特性(DSO,dynamic shared object),

LVS的工作模式介绍和NAT模式&DR模式实验步骤

一:LVS介绍 二.LVS的NAT和DR模式的实验及配置步骤 一.LVS的简单介绍 linux virtual server 简单来讲lvs是一段内核代码 类似于netfilter本身是一框架但不提供任何功能,但是在这框架上提供了能够根据用户定义的转发规则将用户对于服务应用的请求转发至后端主机的机制,类似于DNAT 但DNAT只是其提供的一种工作模式 LVS的工作模式 lvs是工作在内核中的第四层(TCP/UDP)层 能够处理用户请求的套接字,而后只判定用户是否访问了定义为集群服务的应用 在lv

LVS 三种工作模式基本配置(不含HA)

类别:原创 服务器 本文参考 LVS三种工作模式简介及案例参考http://www.sxt.cn/u/324/blog/3188 LVS DR模式基本配置参考http://www.21ops.com/ops/26717.html LVS TUN模式配置参考(其它的文档全都少了内容) http://outofmemory.cn/wr/?u=http%3A%2F%2Fwww.jizhuomi.com%2Fsoftware%2F365.html ipvsadm 命令详细参数参考 http://blog