keepalived和lvs高可用集群

大白菜和MySQL2024-09-09 21:01

keepavlied和lvs高可用集群搭建

主备模式：

关闭防火墙和selinux

bash 复制代码 
systemctl stop firewalld
setenforce 0

部署master负载调度服务器 zyj86

安装ipvsadm keepalived

bash 复制代码 
yum install -y keepalived ipvsadm

修改主节点配置

bash 复制代码 
vim /etc/keepalived/keepalived.conf
复制代码 
! Configuration File for keepalived

global_defs {
   notification_email {
     root@localhost #邮件设置
   }
   notification_email_from root@localhost
   #发邮件的地址
   smtp_server 127.0.0.1
   #邮件服务器地址
   smtp_connect_timeout 30
   #邮件服务器连接timeout
   router_id zyjhost86 #每个keepalived主机的唯一标识，建议使用主机名
   vrrp_skip_check_adv_addr
   #对所有通告报文都检查，会比较消耗性能，启用此配置后，如果收到的通告报文和上一个报文是同一个路由器，则跳过检查，默认值为全检查
   #vrrp_strict
   #严格遵守VRRP协议,启用此项后以下状况将无法启动服务:1.无VIP地址 2.配置了单播邻居 3.在VRRP版本2中有IPv6地址，开启动此项并且没有配置vrrp_iptables时会自动开启iptables防火墙规则，默认导致VIP无法访问,建议不加此项配置。
   vrrp_garp_interval 0
   #gratuitous ARP messages 免费ARP报文发送延迟，0表示不延迟
   vrrp_gna_interval 0 
   #unsolicited NA messages （不请自来）消息发送延迟
}

vrrp_instance VI_1 {
    state MASTER 
    #当前节点在此虚拟路由器上的初始状态，状态为MASTER或者BACKUP
    interface ens160
    virtual_router_id 51 
    #每个虚拟路由器惟一标识，范围：0-255，每个虚拟路由器此值必须唯一，否则服务无法启动，同属一个虚拟路由器的多个keepalived节点必须相同,务必要确认在同一网络中此值必须唯一
    priority 100 #优先级，master优先级一定要大于backup
    #当前物理节点在此虚拟路由器的优先级，范围：1-254，值越大优先级越高,每个keepalived主机节点此值不同
    advert_int 1 #master和backup之间通告间隔的秒数（心跳频率）
    authentication {
        auth_type PASS #认证信息
        auth_pass 1111 #认证信息
    }
    virtual_ipaddress {
        192.168.3.188 #虚拟ip地址
    }
}

#虚拟地址 端口
virtual_server 192.168.3.188 80 {
    delay_loop 6
    #健康间隔时间6秒
    lb_algo rr
    #调度算法轮询
    lb_kind DR
    #lvs模式为DR直连路由模式
    persistence_timeout 50
    #连接保持时间为50 可以修改为0 轮询较快
    protocol TCP
    #采用协议
    
#后端真实服务器节点的ip地址
    real_server 192.168.3.88 80 {
        weight 1
        #节点权重
          TCP_CHECK {
          connect_port 80
          #检查目标端口
          connect_timeout 3
          #连接超时 
          nb_get_retry 3
          #重试次数
          delay_before_retry 3
          #重试间隔时间
        }
        #tcp检测后端服务器节点是否正常
    }

    real_server 192.168.3.89 80 {
        weight 1
          TCP_CHECK {
          connect_port 80
          connect_timeout 3
          nb_get_retry 3
          delay_before_retry 3
        }
    }

}
bash 复制代码 
systemctl enable --now keepalived.service

部署backup负载调度服务器 zyj87

安装ipvsadm keepalived

bash 复制代码 
yum install -y keepalived ipvsadm

修改备用节点配置

bash 复制代码 
vim /etc/keepalived/keepalived.conf
复制代码 
! Configuration File for keepalived

global_defs {
   notification_email {
     root@localhost #邮件设置
   }
   notification_email_from root@localhost
   #发邮件的地址
   smtp_server 127.0.0.1
   #邮件服务器地址
   smtp_connect_timeout 30
   #邮件服务器连接timeout
   router_id zyjhost87 #每个keepalived主机的唯一标识，建议使用主机名
   vrrp_skip_check_adv_addr
   #对所有通告报文都检查，会比较消耗性能，启用此配置后，如果收到的通告报文和上一个报文是同一个路由器，则跳过检查，默认值为全检查
   #vrrp_strict
   #严格遵守VRRP协议,启用此项后以下状况将无法启动服务:1.无VIP地址 2.配置了单播邻居 3.在VRRP版本2中有IPv6地址，开启动此项并且没有配置vrrp_iptables时会自动开启iptables防火墙规则，默认导致VIP无法访问,建议不加此项配置。
   vrrp_garp_interval 0
   #gratuitous ARP messages 免费ARP报文发送延迟，0表示不延迟
   vrrp_gna_interval 0 
   #unsolicited NA messages （不请自来）消息发送延迟
}

vrrp_instance VI_1 {
    state BACKUP 
    #当前节点在此虚拟路由器上的初始状态，状态为MASTER或者BACKUP
    interface ens160
    virtual_router_id 51 
    #每个虚拟路由器惟一标识，范围：0-255，每个虚拟路由器此值必须唯一，否则服务无法启动，同属一个虚拟路由器的多个keepalived节点必须相同,务必要确认在同一网络中此值必须唯一
    priority 99 #优先级，master优先级一定要大于backup
    #当前物理节点在此虚拟路由器的优先级，范围：1-254，值越大优先级越高,每个keepalived主机节点此值不同
    advert_int 1 #master和backup之间通告间隔的秒数（心跳频率）
    authentication {
        auth_type PASS #认证信息
        auth_pass 1111 #认证信息
    }
    virtual_ipaddress {
        192.168.3.188 #虚拟ip地址
    }
}

#虚拟地址 端口
virtual_server 192.168.3.188 80 {
    delay_loop 6
    #健康间隔时间6秒
    lb_algo rr
    #调度算法轮询
    lb_kind DR
    #lvs模式为DR直连路由模式
    persistence_timeout 50
    #连接保持时间为50 可以修改为0 轮询较快
    protocol TCP
    #采用协议
    
#后端真实服务器节点的ip地址
    real_server 192.168.3.88 80 {
        weight 1
        #节点权重
          TCP_CHECK {
          connect_port 80
          #检查目标端口
          connect_timeout 3
          #连接超时 
          nb_get_retry 3
          #重试次数
          delay_before_retry 3
          #重试间隔时间
        }
        #tcp检测后端服务器节点是否正常
    }

    real_server 192.168.3.89 80 {
        weight 1
          TCP_CHECK {
          connect_port 80
          connect_timeout 3
          nb_get_retry 3
          delay_before_retry 3
        }
    }

}
bash 复制代码 
systemctl enable --now keepalived.service

keepalived会在ens160网卡上生成一个vip虚拟地址192.168.3.188

bash 复制代码 
[root@zyj86 ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: ens160: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc mq state UP group default qlen 1000
    link/ether 00:0c:29:29:83:01 brd ff:ff:ff:ff:ff:ff
    altname enp3s0
    inet 192.168.3.86/24 brd 192.168.3.255 scope global noprefixroute ens160
       valid_lft forever preferred_lft forever
    inet 192.168.3.188/32 scope global ens160
       valid_lft forever preferred_lft forever
    inet6 fe80::20c:29ff:fe29:8301/64 scope link noprefixroute 
       valid_lft forever preferred_lft forever

当主节点（192.168.3.86 zyj86）宕机后vip虚拟地址（192.168.3.188）会飘移到备用节点上即（192.168.3.87 zyj87）主机上。

部署后端服务器zyj88

bash 复制代码 
#配置lo口ip地址
ifconfig lo:1 192.168.3.188/32
echo "ifconfig lo:1 192.168.3.188/32" >> /etc/rc.d/rc.local
chmod +x /etc/rc.d/rc.local

#添加系统只响应目的IP为本地IP的ARP请求
#系统不使用原地址来设置ARP请求的源地址，而是物理mac地址上的IP
vim /etc/sysctl.conf
#加入以下配置
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
net.ipv4.conf.default.arp_ignore = 1
net.ipv4.conf.default.arp_announce = 2
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2

#刷新配置
sysctl -p

安装web服务器 写入测试页面

bash 复制代码 
yum install httpd -y
echo "zyj88" > /var/www/html/index.html
systemctl enable --now httpd

部署后端服务器zyj89

bash 复制代码 
#配置lo口ip地址
ifconfig lo:1 192.168.3.188/32
echo "ifconfig lo:1 192.168.3.188/32" >> /etc/rc.d/rc.local
chmod +x /etc/rc.d/rc.local

#添加系统只响应目的IP为本地IP的ARP请求
#系统不使用原地址来设置ARP请求的源地址，而是物理mac地址上的IP
vim /etc/sysctl.conf
#加入以下配置
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
net.ipv4.conf.default.arp_ignore = 1
net.ipv4.conf.default.arp_announce = 2
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2

#刷新配置
sysctl -p

安装web服务器 写入测试页面

bash 复制代码 
yum install httpd -y
echo "zyj89" > /var/www/html/index.html
systemctl enable --now httpd

访问测试：

互为主备模式：

关闭防火墙和selinux

bash 复制代码 
systemctl stop firewalld
setenforce 0

部署master/backup负载调度服务器 zyj86

安装ipvsadm keepalived

bash 复制代码 
yum install -y keepalived ipvsadm

修改负载调度服务器 zyj86配置

bash 复制代码 
vim /etc/keepalived/keepalived.conf
复制代码 
! Configuration File for keepalived

global_defs {
   notification_email {
     root@localhost #邮件设置
   }
   notification_email_from root@localhost
   #发邮件的地址
   smtp_server 127.0.0.1
   #邮件服务器地址
   smtp_connect_timeout 30
   #邮件服务器连接timeout
   router_id zyjhost86 #每个keepalived主机的唯一标识，建议使用主机名
   vrrp_skip_check_adv_addr
   #对所有通告报文都检查，会比较消耗性能，启用此配置后，如果收到的通告报文和上一个报文是同一个路由器，则跳过检查，默认值为全检查
   #vrrp_strict
   #严格遵守VRRP协议,启用此项后以下状况将无法启动服务:1.无VIP地址 2.配置了单播邻居 3.在VRRP版本2中有IPv6地址，开启动此项并且没有配置vrrp_iptables时会自动开启iptables防火墙规则，默认导致VIP无法访问,建议不加此项配置。
   vrrp_garp_interval 0
   #gratuitous ARP messages 免费ARP报文发送延迟，0表示不延迟
   vrrp_gna_interval 0 
   #unsolicited NA messages （不请自来）消息发送延迟
}

vrrp_instance VI_1 {
    state MASTER 
    #当前节点在此虚拟路由器上的初始状态，状态为MASTER或者BACKUP
    interface ens160
    virtual_router_id 51 
    #每个虚拟路由器惟一标识，范围：0-255，每个虚拟路由器此值必须唯一，否则服务无法启动，同属一个虚拟路由器的多个keepalived节点必须相同,务必要确认在同一网络中此值必须唯一
    priority 100 #优先级，master优先级一定要大于backup
    #当前物理节点在此虚拟路由器的优先级，范围：1-254，值越大优先级越高,每个keepalived主机节点此值不同
    advert_int 1 #master和backup之间通告间隔的秒数（心跳频率）
    authentication {
        auth_type PASS #认证信息
        auth_pass 1111 #认证信息
    }
    virtual_ipaddress {
        192.168.3.188 #虚拟ip地址
    }
}

#互为主备就再加一组配置
vrrp_instance VI_2 {
    state BACKUP 
    #当前节点在此虚拟路由器上的初始状态，状态为MASTER或者BACKUP
    interface ens160
    virtual_router_id 40
    #每个虚拟路由器惟一标识，范围：0-255，每个虚拟路由器此值必须唯一，否则服务无法启动，同属一个虚拟路由器的多个keepalived节点必须相同,务必要确认在同一网络中此值必须唯一
    priority 90 #优先级，master优先级一定要大于backup
    #当前物理节点在此虚拟路由器的优先级，范围：1-254，值越大优先级越高,每个keepalived主机节点此值不同
    advert_int 1 #master和backup之间通告间隔的秒数（心跳频率）
    authentication {
        auth_type PASS #认证信息
        auth_pass 2222 #认证信息
    }
    virtual_ipaddress {
        192.168.3.199 #虚拟ip地址
    }
}

#虚拟地址 端口
virtual_server 192.168.3.188 80 {
    delay_loop 6
    #健康间隔时间6秒
    lb_algo rr
    #调度算法轮询
    lb_kind DR
    #lvs模式为DR直连路由模式
    persistence_timeout 50
    #连接保持时间为50 可以修改为0 轮询较快
    protocol TCP
    #采用协议
    
#后端真实服务器节点的ip地址
    real_server 192.168.3.88 80 {
        weight 1
        #节点权重
          TCP_CHECK {
          connect_port 80
          #检查目标端口
          connect_timeout 3
          #连接超时 
          nb_get_retry 3
          #重试次数
          delay_before_retry 3
          #重试间隔时间
        }
        #tcp检测后端服务器节点是否正常
    }

    real_server 192.168.3.89 80 {
        weight 1
          TCP_CHECK {
          connect_port 80
          connect_timeout 3
          nb_get_retry 3
          delay_before_retry 3
        }
    }

}

#互为主备就再加一组配置
#虚拟地址 端口
virtual_server 192.168.3.199 80 {
    delay_loop 6
    #健康间隔时间6秒
    lb_algo rr
    #调度算法轮询
    lb_kind DR
    #lvs模式为DR直连路由模式
    persistence_timeout 50
    #连接保持时间为50 可以修改为0 轮询较快
    protocol TCP
    #采用协议
    
#后端真实服务器节点的ip地址
    real_server 192.168.3.88 80 {
        weight 1
        #节点权重
          TCP_CHECK {
          connect_port 80
          #检查目标端口
          connect_timeout 3
          #连接超时 
          nb_get_retry 3
          #重试次数
          delay_before_retry 3
          #重试间隔时间
        }
        #tcp检测后端服务器节点是否正常
    }

    real_server 192.168.3.89 80 {
        weight 1
          TCP_CHECK {
          connect_port 80
          connect_timeout 3
          nb_get_retry 3
          delay_before_retry 3
        }
    }

}
bash 复制代码 
systemctl enable --now keepalived.service

部署master/backup负载调度服务器 zyj87

安装ipvsadm keepalived

bash 复制代码 
yum install -y keepalived ipvsadm

修改负载调度服务器 zyj87配置

bash 复制代码 
vim /etc/keepalived/keepalived.conf
复制代码 
! Configuration File for keepalived

global_defs {
   notification_email {
     root@localhost #邮件设置
   }
   notification_email_from root@localhost
   #发邮件的地址
   smtp_server 127.0.0.1
   #邮件服务器地址
   smtp_connect_timeout 30
   #邮件服务器连接timeout
   router_id zyjhost86 #每个keepalived主机的唯一标识，建议使用主机名
   vrrp_skip_check_adv_addr
   #对所有通告报文都检查，会比较消耗性能，启用此配置后，如果收到的通告报文和上一个报文是同一个路由器，则跳过检查，默认值为全检查
   #vrrp_strict
   #严格遵守VRRP协议,启用此项后以下状况将无法启动服务:1.无VIP地址 2.配置了单播邻居 3.在VRRP版本2中有IPv6地址，开启动此项并且没有配置vrrp_iptables时会自动开启iptables防火墙规则，默认导致VIP无法访问,建议不加此项配置。
   vrrp_garp_interval 0
   #gratuitous ARP messages 免费ARP报文发送延迟，0表示不延迟
   vrrp_gna_interval 0 
   #unsolicited NA messages （不请自来）消息发送延迟
}

vrrp_instance VI_1 {
    state MASTER 
    #当前节点在此虚拟路由器上的初始状态，状态为MASTER或者BACKUP
    interface ens160
    virtual_router_id 51 
    #每个虚拟路由器惟一标识，范围：0-255，每个虚拟路由器此值必须唯一，否则服务无法启动，同属一个虚拟路由器的多个keepalived节点必须相同,务必要确认在同一网络中此值必须唯一
    priority 100 #优先级，master优先级一定要大于backup
    #当前物理节点在此虚拟路由器的优先级，范围：1-254，值越大优先级越高,每个keepalived主机节点此值不同
    advert_int 1 #master和backup之间通告间隔的秒数（心跳频率）
    authentication {
        auth_type PASS #认证信息
        auth_pass 1111 #认证信息
    }
    virtual_ipaddress {
        192.168.3.188 #虚拟ip地址
    }
}

#互为主备就再加一组配置
vrrp_instance VI_2 {
    state MASTER 
    #当前节点在此虚拟路由器上的初始状态，状态为MASTER或者BACKUP
    interface ens160
    virtual_router_id 40
    #每个虚拟路由器惟一标识，范围：0-255，每个虚拟路由器此值必须唯一，否则服务无法启动，同属一个虚拟路由器的多个keepalived节点必须相同,务必要确认在同一网络中此值必须唯一
    priority 95 #优先级，master优先级一定要大于backup
    #当前物理节点在此虚拟路由器的优先级，范围：1-254，值越大优先级越高,每个keepalived主机节点此值不同
    advert_int 1 #master和backup之间通告间隔的秒数（心跳频率）
    authentication {
        auth_type PASS #认证信息
        auth_pass 2222 #认证信息
    }
    virtual_ipaddress {
        192.168.3.199 #虚拟ip地址
    }
}

#虚拟地址 端口
virtual_server 192.168.3.188 80 {
    delay_loop 6
    #健康间隔时间6秒
    lb_algo rr
    #调度算法轮询
    lb_kind DR
    #lvs模式为DR直连路由模式
    persistence_timeout 50
    #连接保持时间为50 可以修改为0 轮询较快
    protocol TCP
    #采用协议
    
#后端真实服务器节点的ip地址
    real_server 192.168.3.88 80 {
        weight 1
        #节点权重
          TCP_CHECK {
          connect_port 80
          #检查目标端口
          connect_timeout 3
          #连接超时 
          nb_get_retry 3
          #重试次数
          delay_before_retry 3
          #重试间隔时间
        }
        #tcp检测后端服务器节点是否正常
    }

    real_server 192.168.3.89 80 {
        weight 1
          TCP_CHECK {
          connect_port 80
          connect_timeout 3
          nb_get_retry 3
          delay_before_retry 3
        }
    }

}

#互为主备就再加一组配置
#虚拟地址 端口
virtual_server 192.168.3.199 80 {
    delay_loop 6
    #健康间隔时间6秒
    lb_algo rr
    #调度算法轮询
    lb_kind DR
    #lvs模式为DR直连路由模式
    persistence_timeout 50
    #连接保持时间为50 可以修改为0 轮询较快
    protocol TCP
    #采用协议
    
#后端真实服务器节点的ip地址
    real_server 192.168.3.88 80 {
        weight 1
        #节点权重
          TCP_CHECK {
          connect_port 80
          #检查目标端口
          connect_timeout 3
          #连接超时 
          nb_get_retry 3
          #重试次数
          delay_before_retry 3
          #重试间隔时间
        }
        #tcp检测后端服务器节点是否正常
    }

    real_server 192.168.3.89 80 {
        weight 1
          TCP_CHECK {
          connect_port 80
          connect_timeout 3
          nb_get_retry 3
          delay_before_retry 3
        }
    }

}
bash 复制代码 
systemctl enable --now keepalived.service

部署后端服务器zyj88

bash 复制代码 
#配置lo口ip地址
ifconfig lo:1 192.168.3.188/32
ifconfig lo:2 192.168.3.199/32
echo "ifconfig lo:1 192.168.3.188/32" >> /etc/rc.d/rc.local
echo "ifconfig lo:2 192.168.3.199/32" >> /etc/rc.d/rc.local
chmod +x /etc/rc.d/rc.local

#添加系统只响应目的IP为本地IP的ARP请求
#系统不使用原地址来设置ARP请求的源地址，而是物理mac地址上的IP
vim /etc/sysctl.conf
#加入以下配置
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
net.ipv4.conf.default.arp_ignore = 1
net.ipv4.conf.default.arp_announce = 2
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2

#刷新配置
sysctl -p

安装web服务器 写入测试页面

bash 复制代码 
yum install httpd -y
echo "zyj88" > /var/www/html/index.html
systemctl enable --now httpd

部署后端服务器zyj89

bash 复制代码 
#配置lo口ip地址
ifconfig lo:1 192.168.3.188/32
ifconfig lo:2 192.168.3.199/32
echo "ifconfig lo:1 192.168.3.188/32" >> /etc/rc.d/rc.local
echo "ifconfig lo:2 192.168.3.199/32" >> /etc/rc.d/rc.local
chmod +x /etc/rc.d/rc.local

#添加系统只响应目的IP为本地IP的ARP请求
#系统不使用原地址来设置ARP请求的源地址，而是物理mac地址上的IP
vim /etc/sysctl.conf
#加入以下配置
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
net.ipv4.conf.default.arp_ignore = 1
net.ipv4.conf.default.arp_announce = 2
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2

#刷新配置
sysctl -p

安装web服务器 写入测试页面

bash 复制代码 
yum install httpd -y
echo "zyj89" > /var/www/html/index.html
systemctl enable --now httpd

访问测试：

关闭其中一台调度器再测试

访问测试：

相关推荐
Alex艾力的IT数字空间7 小时前
在 Kylin（麒麟）操作系统上搭建 Docker 环境
大数据·运维·缓存·docker·容器·负载均衡·kylin
嵌入式学习和实践7 小时前
虚拟机 Ubuntu 磁盘扩容完全指南：从原理到实践，一步到位
linux·ubuntu·磁盘扩容
陳10307 小时前
Linux：进程间切换与调度
linux·运维·服务器
lcreek8 小时前
Linux 虚拟文件系统的建立与使用全过程解析
linux·虚拟文件系统·vfs
寒秋花开曾相惜8 小时前
（学习笔记）第四章 处理器体系结构
linux·网络·数据结构·笔记·学习
疏星浅月8 小时前
虚拟内存三大核心作用详解
linux·c语言·arm开发·嵌入式硬件
邂逅星河浪漫9 小时前
【银行内网开发-管理端】Vue管理端+Auth后台开发＋Nginx配置+Linux部署（详细解析）
linux·javascript·css·vue.js·nginx·html·前后端联调
SilentSamsara10 小时前
TCP 三次握手：连接建立失败的那些坑
运维·服务器·网络·网络协议·tcp/ip
码农小钻风10 小时前
利用Samba实现局域网跨平台共享文件
linux·samba·共享
LN花开富贵10 小时前
【ROS】鱼香ROS2学习笔记二
linux·笔记·python·学习·嵌入式
热门推荐
012026年4月技术前沿：AI大模型爆发、智能体革命与量子安全新纪元02GitHub 镜像站点032026 年 AI 编程助手全面对比评测：Cursor vs Copilot vs Claude Code vs GitHub Copilot Free04一周AI热点速览（2026.03.31-04.06）：GPT-6曝光、谷歌开源Gemma 4、资本狂飙与模型军备竞赛05零成本！Ollama本地部署国产大模型全指南（支持Kimi-K2.5/GLM-5/Qwen，新手秒上手）06GPT-6发布日深度解析-Symphony架构200万Token实战07AI Weekly | 2026年4月第二周 · GitHub热门项目与AI发展趋势深度解析08基于 Docker 部署 Hermes Agent 并接入飞书机器人的完整指南09从限购到畅通：GLM-5.1 Coding Plan接入攻略10GPT-6核心能力解析及与现有主流大模型对比