CentOS7Linux中服务器LVS负载均衡、高可用集群搭建(NAT、DR);

时间:2024-01-20 16:20:33

集群

声明

文档不断更新中...

集群概念

一组相互独立又相互依赖的,通过网络连接的由计算机组,以单一的模式进行管理,为对方提供服务,对于用户来说,用户会认为对方是一个服务。

  • DIP:用来和后端服务器进行数据交互的IP

  • CIP:客户端的IP

  • VIP:是域名解析的IP,是集群对外的公网IP

  • RIP:真实服务器的IP

  • 节点:一组计算机组中的一台就是集群的一个节点。

集群特性

可伸缩性、可靠性、可管理性。

Web服务器并发相应瓶颈

  • 向上扩展/纵向扩展:加CPU、加内存、加带宽、加SSD。
  • 向外扩展/横向扩展:加服务器,使用多台服务器同时为用户提供服务。

向外扩展:就是集群

集群的分类

  • 负载均衡(Load Balance)集群,简称LB
  • 高可用(High Availability)集群,简称HA
  • 高性能(High Perfermance)集群,简称HPC

LB实现方法:

  • 硬件:-F5负载均衡器
  • 软件:-LVS(4层,传输层)、Nginx(7层,应用层)

LVS集群

LVS是Linux Virtual Server的缩写,即Linux虚拟服务器,是一个虚拟的服务器集群系统。根据iptables的实现开发的,使用方法和iptables类似。

官网地址:http://www.linuxvirtualserver.org/

中文站点: http://zh.linuxvirtualserver.org/

CentOS7Linux中服务器LVS负载均衡、高可用集群搭建(NAT、DR);

负载调度器

分发器(Load Balancer Director):整个集群对外的最前端,负责接收用户请求,并且根据自己的调度算法,将请求转发到后端的真实服务器上的动作,而用户认为服务是来自一个IP地址(虚拟地址VIP)上的。

服务器池

Server Pool:真正为用户提供服务的服务器,每一台就是一台RS(Real Server),执行的服务有Web, Mail, FTP, DNS等。

共享存储

Shared Storaged为RS保持相同内容,提供数据的一致性,也就是说,它为服务器池提供一个共享的存储区,这样很容易使得服务器池拥有相同的内容,提供相同的服务。

LVS负载均衡的三种模式

  • NAT(网络地址映射)
  • IP Tunneling(IP隧道)
  • Direct Routing(直接路由)

不同的转发模式决定了不同的Cluster(群)的网络结构。

NAT:网络地址转换

DNAT:目标地址转换,改变的是目标地址

SNAT:源地址转换,改变的是原地址

LVS-NAT:使用的就是SNAT和DNAT完成包的转发。

NAT模式工作原理:

客户端访问调度器时,调度器通往网络地址转换,重写请求报文的目标地址,根据预设的调度算法,将请求分发给后端RS服务器,RS服务器的相应报文通过调度器时,报文的源地址被重写,再返回给用户,完成整个负载调度过程。

优点

NAT方式支持任何操作系统,以及私有网络,并且只需要一个Internet IP 地址。

缺点

执行NAT每次需要重写包,有一定的延迟,对负载均衡器的压力大。

搭建LVS-NAT集群

节点声明:

CentOS7Linux中服务器LVS负载均衡、高可用集群搭建(NAT、DR);

配置LVS-NAT集群:
harry63配置成分发器:
1、打开路由转发功能
[root@harry63 ~]# vim /etc/sysctl.conf
改:net.ipv4.ip_forward = 0
为:net.ipv4.ip_forward = 1
让配置生效:
[root@harry63 ~]# sysctl -p 2、配置网络环境:
添加一个网卡(需要两张网卡), 配置成以下网络环境:
eth0 192.168.1.63 模式:br0 模拟公网
eth1 192.168.2.63 模式:vmnet4 模拟内网 Director分发器:需不需要开启80(服务的)端口 ? 1.4.5 安装: LVS管理工具: ipvsadmin
[root@harry63 Packages]# pwd
/mnt/Packages
[root@harry63 Packages]# rpm -ivh ipvsadm-1.25-9.el6.x86_64.rpm
或:
yum install ipvsadm 1.4.6 使用ipvsadm命令设置规则:
[root@harry63 ~]# ipvsadm -A -t 192.168.1.63:80 -s rr rr代表轮循
选项:
-A 添加虚拟服务器
-t 表示TCP的服务 VIP:PORT
-s 指定调度算法 rr表示round-robin 轮循 [root@harry63 ~]# ipvsadm -a -t 192.168.1.63:80 -r 192.168.2.64 -m
[root@harry63 ~]# ipvsadm -a -t 192.168.1.63:80 -r 192.168.2.62 -m
选项:
-a 表示添加real server的地址
-r 指定real server的IP地址
-m 表示masquerade 也就是NAT方式的LVS 1.4.7 查看:
Ipvsadm命令,用于配置及查看内核IPVS表和算法的工具,类似于iptables
[root@harry63 ~]# ipvsadm -L -n
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
-> RemoteAddress:Port Forward Weight ActiveConn InActConn
TCP 192.168.1.63:80 rr
-> 192.168.2.62:80 Masq 1 0 0
-> 192.168.2.64:80 Masq 1 0 0 1.4.8 保存配置或规则
[root@harry63 ~]# ipvsadm --save > /etc/sysconfig/ipvsadm
或ipvsadm -S 保存以上的配置
Saving IPVS table to /etc/sysconfig/ipvsadm: [确定] 1.4.9 配置真实服务器
RealServer:在harry62和harry64上面配置:
准备:
1、配置IP:REAL SERVER自己的网络相关信息配置成如下:
harry62: eth0: vmnet4 : 192.168.2.62 网关: 192.168.2.63
harry64: eth0: vmnet4 : 192.168.2.64 网关: 192.168.2.63 2、配置harry64为realserver, 并启web服务
[root@harry64 ~]# yum install -y httpd
[root@harry64 ~]# systemctl restart httpd
[root@harry64 ~]# echo "192.168.2.64" > /var/www/html/index.html #(实验期间,各个服务器的页面不同) 3、配置harry62为realserver, 并启web服务
[root@harry62 ~]# yum install -y httpd
[root@harry62 ~]# systemctl restart httpd
[root@harry62 ~]# echo "192.168.2.62" > /var/www/html/index.html #(实验期间,各个服务器的页面不同) 1.4.10 测试:
在harry63上测试:
[root@harry63 ~]# yum install elinks 测试realserver :
[root@harry63 ~]# elinks 192.168.2.64
[root@harry63 ~]# elinks 192.168.2.64 --dump
192.168.2.64
[root@harry63 ~]# elinks 192.168.2.62 --dump
192.168.2.62 1.4.11 测试VIP:
[root@harry63 ~]# elinks 192.168.1.63 --dump
192.168.2.62 访问: 在物理上打开浏览器访问: 每按F5刷新一次,就会变换一个页面。
至此,NAT模式集群配置完毕。

IP Tunneling(IP隧道)

Director(分发器)分配请求到不同的Real Server,Real Server处理请求后直接回应用户。

条件

服务器必须拥有正式的IP地址用于与客户机直接通信,并且所有服务器必须支持IP隧道协议。

优点

提高了调度器的处理能力,允许Real Server在任何LAN或者WAN上运行,允许异地部署,容错。

Direct Routing(直接路由)

与IP Tunneling类似,负载均衡器仅处理一半的连接,同样增加了系统的可伸缩性。

1)基于mac的数据报文转发, 是效率最好的, 但是是根据交换机的MAC地址表来实现的

2)2层设备不具有路由功能, 那么广播也就不具有跨路由的功能, 所有要实现mac地址广播, 必须在同一物理网段

3):vlan具有隔离广播的功能, 所有要能处理mac地址广播, 就应该在同一个VLAN中

原理

  • client向目标vip发出请求,Director接收。
  • Director分发器根据负载均衡算法选择一台active的realserver,将RIP网卡所在的mac地址作为目标mac地址发送到局域网。
  • realserver在局域网中接收到这个帧。
  • 如果client与VS在同一网段,那么就直接接收到回复报文,如果跨网段,则通过路由器/gateway经由Internet返回给用户。

条件

  • 所有设备应该在同一物理网段中
  • 所有设备应该在同一广播域中

优点

没有IP封装的开销。基于2层的数据报文转发,要比基于3层的网络转发效率高。在LVS的所有模式中,效率最好。

缺点

所有服务器都必须在一个物理网段。

全部服务器都为公网IP地址,可以直接和客户端通信。

DR集群搭建

待更新...

环境声明

DIP 192.168.0.64

VIP 192.168.0.46

RIP1: 192.168.0.66

RIP2: 192.168.0.67

# 配置虚拟IP

负载均衡

LB负载均衡分为两类:LVS(四层)和nginx或者haproxy