一、LVS+Keepalived 高可用群集

Keepalived是一个根据VRRP协议来实现的LVS服务高可用方案,能够处理静态路由呈现的单点毛病问题。

1、Keepalived工具介绍

专为LVS和HA设计的一款健康检查工具

• 支持毛病主动切换(Failover)

• 支持节点健康状况检查(Health Checking)

2、作业原理

在一个LVS服务集群中一般有主服务器(MASTER)和备份服务器(BACKUP)两种人物的服务器,但是对外表现为一个虚拟IP,主服务器会发送VRRP布告信息给备份服务器,当备份服务器收不到VRRP音讯的时分,即主服务器反常的时分,备份服务器就会接收虚拟IP,持续供给服务,然后保证了高可用性。在一个LVS服务集群中一般有主服务器(MASTER)和备份服务器(BACKUP)两种人物的服务器,但是对外表现为一个虚拟IP,主服务器会发送VRRP布告信息给备份服务器,当备份服务器收不到VRRP音讯的时分,即主服务器反常的时分,备份服务器就会接收虚拟IP,持续供给服务,然后保证了高可用性。

  • 主服务器效果:转发数据;发送报文告诉备服务器自己在线。

  • 备服务器效果:监听主服务器发来的数据;收不到音讯的时分就顶替主服务器。

3、Keepalived系统主要模块及其效果

keepalived系统架构中主要有三个模块,分别是core、check和vrrp。

core模块: 为keepalived的核心,负责主进程的发动、维护及大局装备文件的加载和解析。

vrrp模块: 是来实现VRRP协议的。(调度器之间的健康检查和主备切换)

check模块: 负责健康检查,常见的方法有端口检查及URL检查。(节点服务器的健康检查)

4、 VRRP (虚拟路由冗余协议)

是针对路由器的一种备份处理方案

由多台路由器组成一个热备组,通过共用的虚拟IP地址对外供给服务,每个热备组内一起只有一台主路由器供给服务,其他路由器处于冗余状况。若当前在线的路由器失效,则其他路由器会根据设置的优先级主动顶替虚拟IP地址,持续供给服务

5、毛病搬运机制

Keepalived高可用服务之间的毛病切换搬运,是通过VRRP 来实现的。

在 Keepalived服务正常作业时,主 Master节点会不断地向备节点发送(多播的方法)心跳音讯,用以告诉备Backup节点自己还活着,当主 Master节点产生毛病时,就无法发送心跳音讯,备节点也就因而无法持续检测到来自主 Master节点的心跳了,于是调用自身的接收程序,接收主Master节点的 IP资源及服务。

而当主 Master节点康复时,备Backup节点又会释放主节点毛病时自身接收的IP资源及服务,康复到原来的备用人物。

二、LVS+Keepalived 高可用群集的搭建过程

环境准备

主DR 服务器: 192.168.10.60 备DR 服务器: 192.168.10.70 Web 服务器1: 192.168.10.80
Web 服务器2: 192.168.10.90
nfs 服务器: 192.168.10.100
vip:192.168.10.12

1、装备负载调度器(主、备相同;192.168.10.60;192.168.10.70)

systemctl stop firewalld.service
setenforce 0
yum -y install ipvsadm keepalived
modprobe ip_vs
cat /proc/net/ip_vs

1.1 装备keeplived(主、备DR 服务器上都要设置)

cd /etc/keepalived/
cp keepalived.conf keepalived.conf.bak
vim keepalived.conf
......
global_defs {                       #界说大局参数
--10行--修正,邮件服务指向本地
    smtp_server 127.0.0.1
--12行--修正,指定服务器(路由器)的称号,主备服务器称号须不同,主为LVS_01,备为LVS_02
    router_id LVS_01
}
vrrp_instance VI_1 {                #界说VRRP热备实例参数
--20行--修正,指定热备状况,主为MASTER,备为BACKUP
    state MASTER
--21行--修正,指定承载vip地址的物理接口
    interface ens33
--22行--修正,指定虚拟路由器的ID号,每个热备组坚持一致
    virtual_router_id 10
--23行--修正,指定优先级,数值越大优先级越高,主为100,备为90
    priority 100
    advert_int 1                    #布告距离秒数(心跳频率)
    authentication {                #界说认证信息,每个热备组坚持一致
        auth_type PASS              #认证类型
--27行--修正,指定验证暗码,主备服务器坚持一致
        auth_pass 123456
    }
    virtual_ipaddress {             #指定群集vip地址
        192.168.10.12
    }
}
--36行--修正,指定虚拟服务器地址(VIP)、端口,界说虚拟服务器和Web服务器池参数
virtual_server 192.168.10.12 80 {
    delay_loop 6                    #健康检查的距离时间(秒)
    lb_algo rr                      #指定调度算法,轮询(rr)
--39行--修正,指定群集作业形式,直接路由(DR)
    lb_kind DR
    persistence_timeout 50          #连接坚持时间(秒)
    protocol TCP                    #应用服务采用的是 TCP协议
--43行--修正,指定第一个Web节点的地址、端口
    real_server 192.168.10.80 80 {
        weight 1                    #节点的权重
--45行--删除,增加以下健康检查方法       
        TCP_CHECK {
            connect_port 80         #增加检查的目标端口
            connect_timeout 3       #增加连接超时(秒)
            nb_get_retry 3          #增加重试次数
            delay_before_retry 4    #增加重试距离
        }
    }
    real_server 192.168.10.90 80 {     #增加第二个 Web节点的地址、端口
        weight 1
        TCP_CHECK {
            connect_port 80
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 4
        }
    }
##删除后面剩余的装备##
}
systemctl start keepalived
ip addr show dev ens33              #检查虚拟网卡vip

LVS+Keepalived 高可用群集部署

LVS+Keepalived 高可用群集部署

1.2 装备分发战略(keepalived装备好后,能够不必再配ipvsadm 分发战略)

ipvsadm-save > /etc/sysconfig/ipvsadm
systemctl start ipvsadm
ipvsadm -ln
ipvsadm-save > /etc/sysconfig/ipvsadm
#如果没有vip的分发战略。则重启keepalived 服务

LVS+Keepalived 高可用群集部署

1.3 调整内核 proc 响应参数,封闭linux内核的重定向参数响应

vim /etc/sysctl.conf
net.ipv4.conf.all.send_redirects = 0
net.ipv4.conf.default.send_redirects = 0
net.ipv4.conf.ens33.send_redirects = 0
sysctl -p

LVS+Keepalived 高可用群集部署

2、布置同享存储(NFS服务器:192.168.10.100)

systemctl stop firewalld.service
systemctl disable firewalld.service
setenforce 0
yum install nfs-utils rpcbind -y
systemctl start nfs.service
systemctl start rpcbind.service
systemctl enable nfs.service
systemctl enable rpcbind.service
mkdir /opt/km /opt/kt
chmod 777 /opt/xkm /opt/kt
vim /etc/exports
/usr/share *(ro,sync)
/opt/km 192.168.2.0/24(rw,sync)
/opt/kt 192.168.2.0/24(rw,sync)
--发布同享---
exportfs -rv

LVS+Keepalived 高可用群集部署

3、装备节点服务器(192.168.10.80;192.168.10.90)

systemctl stop firewalld
setenforce 0
yum -y install httpd
systemctl start httpd
vim /etc/sysconfig/network-scripts/ifcfg-lo:0
DEVICE=lo:0
ONBOOT=yes
IPADDR=192.168.10.12
NETMASK=255.255.255.255
service network restart 或 systemctl restart network
ifup lo:0
ifconfig lo:0
route add -host 192.168.10.12 dev lo:0

LVS+Keepalived 高可用群集部署

vim /etc/sysctl.conf
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
sysctl -p
--192.168.10.80---
echo 'this is km web!' > /var/www/html/index.html
--192.168.10.90---
echo 'this is kt web!' > /var/www/html/index.html

LVS+Keepalived 高可用群集部署

4、测验验证

在客户端拜访 http://192.168.10.12

再在主服务器封闭 keepalived 服务后在测验(systemctl stop keepalived)

LVS+Keepalived 高可用群集部署

LVS+Keepalived 高可用群集部署

LVS+Keepalived 高可用群集部署

LVS+Keepalived 高可用群集部署