目录

一、高可用群集的相关知识

1.高可用(HA)群集与普通群集的比较

普通群集

高可用群集(HA)

2.Keepalived高可用方案 

3.Keepalived的体系模块及其作用

4.Keepalived实现原理 

二、LVS+KeepAlived高可用负载均衡集群的部署

1.配置负载调度器(主、备相同) 

配置keeplived(主、备DR 服务器上都要设置)

 

配置备调度器

启动主备keepalived 

验证

2.配置节点服务器

3.配置负载调度器

4.网页测试

三、KeepAlived补充知识

1.一个合格的群集应该具备的特点

2.健康检查(探针)常用的工作方式 

3.相关面试问题

问题1Keepalived通过什么判断哪台主机为主服务器,通过什么方式配置浮动IP

问题2keepalived的抢占与非抢占模式

四、Keepealived脑裂现象 

1.现象

2.原因

3.解决

4.预防

五、实验部署

1.两台nginx做初始化操作并安装nginx 

2.四层反向代理配置

修改主调度器配置

修改备调度器配置

浏览器测试两台nginx服务器

3.配置高可用

4.准备检查nginx运行状态脚本

主服务器

备服务器

5.开启keepalived服务并测试

分别开启主备两台服务器keepalived

 


一、高可用群集的相关知识

1.高可用(HA)群集与普通群集的比较

普通群集

普通的群集的部署是通过一台度器控制调配多台节点服务器进行业务请求的处理,但是仅仅是一台调度器,就会存在极大的单点故障风险,当该调度器的链路或则调度器本身出现故障时,就会导致整个业务的无法正常进行

高可用群集(HA)

高可用集群是由一台主调度器和一台或多台备用调度器。在主调度器能够正常运转时,由主调度器进行节点服务器业务的分配处理,其余备用调度器处于待机状态,不参与当前的集群运转。当主调度器出现故障无法运转时,此时备用调度器会由优先级最高的调度承担主调度器的工作,而出现故障的主调调度器便会退出当前工作,由人工维修后返回集群

两者比较后:高可用集群只需要在调度器上多进行一台或两台(服务器本身的价格比较昂贵,一般备用的服务器的数量会和当前业务创造的价值对等)的设置,就可避免因调度器瘫痪业务中断的风险,所以实现了真正的高可用的效果

2.Keepalived高可用方案 

Keepalived 是一个基于VRRP协议来实现的LVS服务高可用方案,可以解决静态路由出现的单点故

障问题

在一个LVS服务集群中通常有主服务器(MASTER)和备份服务器(BACKUP)两种角色的服务

器,但是对外表现为一个虚拟IP(VIP),主服务器会发送VRRP通告信息给备份服务器,当备份

服务器收不到VRRP消息的时候,即主服务器异常的时候,备份服务器就会接管虚拟IP,继续提供

服务,从而保证了高可用性。(主备服务器之间由优先级决定,优先级更高的充当主服务器,优先

级低的成为备份服务器)

3.Keepalived的体系模块及其作用

keepalived体系架构中主要有三个模块,分别是core、check和vrrp

  • core模块:为keepalived的核心,负责主进程的启动、维护及全局配置文件的加载和解析。
  • vrrp模块:是来实现VRRP协议的。(调度器之间的健康检查和主备切换)
  • check模块:负责健康检查,常见的方式有端口检查及URL检查。(节点服务器的健康检查) 

4.Keepalived实现原理 

二、LVS+KeepAlived高可用负载均衡集群的部署

本次实验部署采用的时KeepAlived的运用与LVS中DR模式的结合,共同部署出高可用的负载均衡的集群。真实环境还会存在NFS共享目录服务器,考虑在上次的DR实验与NAT实验中都已经展示了NFS服务器与节点服务器之间的连接,本次若做也是相同的操作步骤,就省略了。 

部署前的准备 
设备准备: 

主DR 服务器:192.168.80.105

备DR 服务器:192.168.73.100

Web 服务器1:192.168.73.101

Web 服务器2:192.168.73.102

vip:192.168.80.104

客户端:192.168.80.103

1.配置负载调度器(主、备相同) 

配置keeplived(主、备DR 服务器上都要设置) 

配置备调度器

启动主备keepalived 
systemctl start keepalived
systemctl enable keepalived
验证

主服务器: 

备服务器: 

2.配置节点服务器

参考这篇文章的配置节点服务器操作

 添加永久生效

web1 和 web2 上配置

3.配置负载调度器

启动 ipvsadm 服务

 

复制到备 

4.网页测试

三、KeepAlived补充知识

1.一个合格的群集应该具备的特点

  • 负载均衡          用于提高群集的性能   LVS  Nginx  HAProxy  SLB  F5
  • 健康检查(探针)  针对于调度器和节点服务器    Keepalived   Heartbeat
  • 故障转移          通过VIP漂移实现主备切换     VRRP   脚本

2.健康检查(探针)常用的工作方式 

  • 发送心跳消息    vrrp报文    ping/pong
  • TCP端口检查     向目标主机的 IP:PORT 发起TCP连接请求,如果TCP连接三次握手成功则认为健康检查正常,否则认为健康检查异常
  • HTTP URL检查    向目标主机的URL路径(比如http://IP:PORT/URI路径)发起 HTTP GET 请求方法
  • 如果响应消息的状态码为 2XX 或 3XX,则认为健康检查正常
  • 如果响应消息的状态码为 4XX 或 5XX,则认为健康检查异常

3.相关面试问题

问题1
Keepalived通过什么判断哪台主机为主服务器,通过什么方式配置浮动IP

答案

Keepalived首先做初始化先检查state状态,master为主服务器,backup为备服务器
然后再对比所有服务器的priority,谁的优先级高谁是最终的主服务
优先级高的服务器会通过ip命令为自己的电脑配置一个提前定义好的浮动IP地址

问题2
keepalived的抢占与非抢占模式

答案

抢占模式即MASTER从故障中恢复后,会将VIP从BACKUP节点中抢占过来。非抢占模式即MASTER恢复后不抢占BACKUP升级为MASTER后的VIP
非抢占式俩节点state必须为bakcup,且必须配置nopreempt

 

注意:这样配置后,我们要注意启动服务的顺序,优先启动的获取master权限,与优先级没有关系了

四、Keepealived脑裂现象 

1.现象

主服务器和备服务器都同时拥有相同的VIP

在"双机热备"高可用(HA)系统中,当联系两个节点的"心跳线"断开时(即两个节点断开联系时),

本来为一个整体、动作协调的HA系统,就分裂成为两个独立的节点(即两个独立的个体)。由于相互

失去了联系,都以为是对方出了故障,此时备用调度器会运转起来争做主调度器的工作,而主调度

器依然保持着调度工作,两个调度的同时运转导致整个系统的紊乱。就会发生严重后果:

  • 共享资源被瓜分、两边"服务"都起不来
  • 或者两边"服务"都起来了,但同时读写"共享存储",导致数据损坏(常见如数据库轮询着的联机日志出错)

2.原因

因为主服务器和备服务器的通信中断,导致备服务器无法收到主服务器发送的VRRP报文,备服务

器误认为主服务器已经故障了并通过ip命令生成VIP

硬件原因
 

高可用服务器各节点之间心跳线链路发生故障,导致无法正常通信

  1. 因心跳线坏了(包括断了,老化)
  2. 因网卡及相关驱动坏了,ip配置及冲突问题(网卡直连)
  3. 因心跳线间连接的设备故障(网卡及交换机)
  4. 因仲裁的机器出问题(采用仲裁的方案)

运用配置原因
 

  1. 高可用服务器上开启了iptables防火墙阻挡了心跳消息传输
  2. 高可用服务器上心跳网卡地址等信息配置不正确,导致发送心跳失败
  3. 其他服务配置不当等原因,如心跳方式不同,心跳广插冲突、软件Bug等
  4. Keepalived配置里同一VRRP实例如果virtual_router_id两端参数配置不一致也会导致裂脑问题发生

3.解决
 

关闭主服务器或备服务器其中一个的keepalived服务

4.预防
 

方法1
如果是系统防火墙导致,则关闭防火墙或添加防火墙规则放通VRRP组播地址(224.0.0.18)的传输

方法2
如果是主备服务器之间的通信链路中断导致,则可以在主备服务器之间添加双链路通信

方法3
在主服务器使用脚本定时判断与备服务器通信链路是否中断,如果判断是主备服务器之间的链接中

断则自行关闭主服务器上的keepalived服务

方法4
利用第三方应用或监控系统检测是否发生了脑裂故障现象,如果确认发生了脑裂故障则通过第三方

应用或监控系统来关闭主服务器或备服务器其中一个的keepalived服务

五、实验部署

此实验基于以上 LVS+KeepAlived高可用负载均衡群集的部署实验为基础,将两台调度器改为

nginx服务器,其余不变

  • 准备虚拟机
  • 192.168.80.100(nginx服务器四层代理)
  • 192.168.80.105(nginx服务器四层代理)
  • 192.168.80.101(web1)
  • 192.168.80.102(web2)
  • 192.168.80.103(nfs共享存储)

1.两台nginx做初始化操作并安装nginx 

2.四层反向代理配置

修改主调度器配置
stream {
    upstream backends {
         server 192.168.80.101:80;
         server 192.168.80.102:80;
     }
    server {
         listen 8080;
         proxy_pass backends;
    }
}

 

修改备调度器配置

将主调度器的nginx.conf复制过来

浏览器测试两台nginx服务器

192.168.80.101/192.168.80.102

3.配置高可用

两台nginx服务器安装keepalived

4.准备检查nginx运行状态脚本

主服务器
#!/bin/bash
 
if ! killall -0 nginx &> /dev/null
   then
   systemctl stop keepalived
fi

备服务器

先做个备份

将主里的复制到备里

记住要用反引号!!!!!!!!!

回到备机上操作 👇

5.开启keepalived服务并测试

分别开启主备两台服务器keepalived
systemctl start keepalived
systemctl enable keepalived

更多推荐