LVS

LVS(Linux Virtual Server)

• LVS基于四层，工作效率高
• 单个nginx承受不了压力，需要集群
• LVS充当nginx集群的调度者
• nginx接受请求来回，LVS可以只接受不响应

模式

• NAT
• TUN
• DR

搭建LVS-DR模式

LVS

• 关闭计算机节点网络配置管理器(因为有可能会和网络接口冲突)

systemctl stop NetworkManager
systemctl disable NetworkManager

• 创建虚拟IP(创建子接口)

cd /etc/sysconfig/network-scripts/
cp ifcfg-ens33 ifcfg-ens33:1
vim ifcfg-ens33:1
BOOTPROTO="static"
# 名称
DEVICE="ens33:1"
ONBOOT="yes"
# 虚拟IP
IPADDR="192.168.1.150"
NETMASK="255.255.255.0"

• 重启service network restart
• 安装ipvsadm yum install ipvsadm

RS

• 配置RS(Real Server)虚拟IP
  • 配置虚拟网络子接口(回环接口)

cd /etc/sysconfig/network-scripts/
cp ifcfg-lo ifcfg-lo:1
vim ifcfg-lo:1
DEVICE=lo:1
IPADDR=192.168.1.150
NETMASK=255.255.255.255
NETWORK=127.0.0.1
BROADCAST=127.255.255.255
ONBOOT=yes
NAME=loopback

• 刷新lo ifup lo
• 配置RS(Real Server)arp
  • arp响应级别
    • 0:只要本机配置了ip,就能响应请求
    • 1:请求的目标地址到达对应的网络接口，才会响应请求
  • arp通告行为
    • 0:本机上任何网络接口都向外通告，所有的网卡都能接受通告
    • 1:尽可能避免本网卡与不匹配的目标进行通告
    • 2:只在本网卡通告

vim /etc/sysctl.conf
# configration for lvs
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.default.arp_ignore = 1
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
net.ipv4.conf.default.arp_announce = 2
net.ipv4.conf.lo.arp_announce = 2

• 刷新sysctl -p
• 增加网关,用于接受数据报文，当有请求到本机后，会交给lo处理

echo "route add -host 192.168.1.150 dev lo:1" >> /etc/rc.local

使用ipvsadm配置集群规则

• 创建LVS节点，用户访问的集群调度者ipvsadm -A -t 192.168.1.150:80 -s rr -p 5
  • -A:添加集群
  • -t:tcp协议
  • ip地址:设定集群的访问ip，即LVS的虚拟ip
  • -s:设置负载均衡算法,rr表示轮询
  • -p:设置连接持久化时间
• 创建RS服务器

ipvsadm -a -t 192.168.1.150:80 -r 192.168.1.120:80 -g
ipvsadm -a -t 192.168.1.150:80 -r 192.168.1.121:80 -g

* `-a`:添加真实服务器
* `-t`:tcp协议
* `-r`:真实服务器ip地址
* `-g`:设定DR模式 * 保存到规则库，否则重启失效`ipvsadm -S` * 检查集群
* 查看集群列表`ipvsadm -Ln`
* 查看集群状态`ipvsadm -Ln --stats`
* 重启`ipvsadm`,重启后需要重新配置`service ipvsadm restart`
* 查看持久化连接`ipvsadm -Ln --persistent-conn`
* 查看连接请求过期时间及请求资源ip和目标ip`ipvsadm -Lnc`
* 设置tcp tcpfin udp的过期时间(一般保持默认)`ipvsadm --set 1 1 1`
* 查看过期时间`ipvsadm -Ln --timeout`