新加坡服务器部署Keepalived,如何验证高可用切换?

发布人:A5数据发布时间:2026-11-13 13:51阅读量:36

Keepalived 高可用切换的核心验证,是确认主节点故障后,备用节点能否接管虚拟 IP(VIP),并由客户端通过该 VIP 继续访问服务。下面以两台新加坡 Linux 服务器、同一私有子网内的 VIP 和 Nginx 为例,演示首次部署、主动切换验证及回滚。

Keepalived 负责节点健康检查和 VIP 漂移,不负责复制网站文件、数据库或应用状态。若服务依赖本地数据,还需要另外设计数据同步、写入一致性和恢复流程;仅看到 VIP 换到备用节点,不能据此认定业务数据也已高可用。

Keepalived 高可用部署离不开稳定的服务器节点与适配业务的网络资源。A5idc数据在新加坡提供物理服务器方案,并覆盖香港、日本、韩国、中国台湾、美国及马来西亚等地区,面向不同访问区域提供相应的 CPU、存储和网络配置选择,可用于搭建网站、业务后台及接口服务。多地区资源有助于企业结合业务部署位置规划节点基础,让高可用架构与实际服务区域相匹配。

适用环境与准备条件

新加坡是服务器所在区域,不会改变 Keepalived 的基本配置;实际能否切换,取决于服务商网络是否允许 VIP 在两台服务器之间迁移。部署前先确认网络方案:

  • 私有网络 VIP:两台服务器位于同一私有子网,网络允许 VIP 变更后从客户端路由到持有 VIP 的节点。
  • 服务商浮动 IP:若要切换公网 IP,服务商必须提供 IP 绑定、浮动 IP 或等效的网络切换能力。单纯在 Linux 网卡上添加公网地址,不代表服务商网络会把流量送到该节点。
  • VRRP 通信:本例使用单播 VRRP。两台服务器之间必须允许 IP 协议号 112 的通信;它不是 TCP 或 UDP 端口。若云平台安全组或虚拟网络不支持该通信方式,应先确认服务商支持的高可用方案,不能只靠安装 Keepalived 解决。

以下示例假设两台服务器运行 Ubuntu Server 22.04 或 24.04,网卡位于同一私有子网,系统使用 systemd。请将所有示例地址和网卡名替换为实际值。

用途示例值说明
主节点 A10.20.0.11初始优先级较高
备用节点 B10.20.0.12初始优先级较低
VIP10.20.0.50/24必须由网络侧支持迁移
网卡ens5以实际网卡名为准
Web 服务Nginx示例健康检查对象

先在两台服务器分别检查系统、地址和网卡:

cat /etc/os-release
ip -br address
ip route

确认两台机器使用的网卡名称、实际 IP 和子网掩码。确认 VIP 未分配给其他设备,也没有被其他 Keepalived 实例使用。若这两台机器不在同一子网,或服务商不支持 VIP 在节点间切换,应先调整网络设计,不能直接照搬后续配置。

还需要准备一个不承担业务的客户端或监测点,用于从服务器外部访问 VIP。只在节点本机测试,无法充分验证网络侧的 VIP 漂移和客户端访问路径。

安装服务并准备健康检查

在两台服务器上安装 Keepalived 和 Nginx:

sudo apt update
sudo apt install -y keepalived nginx

检查服务是否安装成功:

keepalived --version
nginx -v
systemctl is-active nginx

预期 Nginx 状态为 active。若服务尚未启动,可执行:

sudo systemctl enable --now nginx

为了让客户端区分当前响应来自哪台服务器,在两台机器分别创建一个独立的测试页面。该命令只新建 /var/www/html/ha.txt,不会覆盖 Nginx 默认首页:

printf 'node-a\n' | sudo tee /var/www/html/ha.txt

主节点 A 写入 node-a,备用节点 B 将内容改为:

printf 'node-b\n' | sudo tee /var/www/html/ha.txt

在每台机器本地验证 Nginx 响应:

curl -fsS http://127.0.0.1/ha.txt

主节点预期返回 node-a,备用节点预期返回 node-b。若本机访问失败,应先处理 Nginx 或页面路径问题,不要继续把 VIP 切换当作验证目标。

接下来创建供 Keepalived 调用的 Nginx 健康检查脚本。两台服务器执行相同命令:

sudo tee /usr/local/sbin/check_nginx.sh >/dev/null <<'EOF'
#!/bin/sh
systemctl is-active --quiet nginx
EOF
sudo chown root:root /usr/local/sbin/check_nginx.sh
sudo chmod 0755 /usr/local/sbin/check_nginx.sh

手动运行检查脚本并查看退出状态:

sudo /usr/local/sbin/check_nginx.sh
echo $?

Nginx 正常时,预期退出状态为 0。该脚本只检查 Nginx 服务是否处于 active 状态;若业务可用性还依赖应用进程、后端接口或数据库,应设计与真实业务相关的检查,不能把 Nginx 进程正常等同于整个业务正常。

配置 Keepalived

配置前,在两台服务器分别备份当前文件。若原文件不存在,命令会提示错误;可先用 ls -l /etc/keepalived/keepalived.conf 检查:

sudo cp -a /etc/keepalived/keepalived.conf \
  /etc/keepalived/keepalived.conf.bak

编辑 /etc/keepalived/keepalived.conf。以下为主节点 A 的示例,需把 ens5、10.20.0.11、10.20.0.12 和 VIP 换成实际值:

global_defs {
    router_id SG_NODE_A
}

vrrp_script chk_nginx {
    script "/usr/local/sbin/check_nginx.sh"
    interval 2
    timeout 1
    fall 2
    rise 2
    weight -60
}

vrrp_instance VI_1 {
    state BACKUP
    interface ens5
    virtual_router_id 51
    priority 150
    advert_int 1

    unicast_src_ip 10.20.0.11
    unicast_peer {
        10.20.0.12
    }

    virtual_ipaddress {
        10.20.0.50/24 dev ens5
    }

    track_script {
        chk_nginx
    }
}

备用节点 B 使用同一套结构,但替换节点标识、优先级和单播地址:

global_defs {
    router_id SG_NODE_B
}

vrrp_script chk_nginx {
    script "/usr/local/sbin/check_nginx.sh"
    interval 2
    timeout 1
    fall 2
    rise 2
    weight -60
}

vrrp_instance VI_1 {
    state BACKUP
    interface ens5
    virtual_router_id 51
    priority 100
    advert_int 1

    unicast_src_ip 10.20.0.12
    unicast_peer {
        10.20.0.11
    }

    virtual_ipaddress {
        10.20.0.50/24 dev ens5
    }

    track_script {
        chk_nginx
    }
}

两个配置中的 virtual_router_id 必须一致,才能参与同一个 VRRP 实例;同一网络中的其他实例不应重复使用该值。主节点的 priority 高于备用节点。两台机器都设为 state BACKUP,再由优先级决定正常情况下的 VIP 持有者,可避免依赖配置文件里的初始状态判断。

weight -60 表示健康检查失败时降低对应节点的有效优先级。此例中主节点有效优先级会从 150 降到 90,低于备用节点的 100,从而让健康的备用节点接管 VIP。若检查失败,两台节点都不可用,Keepalived 不会凭空恢复业务。

检查网卡名和 IP 配置无误后,分别在两台服务器验证配置语法:

sudo keepalived -t -f /etc/keepalived/keepalived.conf

命令没有报错时才继续启动。若提示配置文件错误,根据报错行修正后重新执行检查;不要在语法检查未通过时重启服务。

启用并启动 Keepalived:

sudo systemctl enable --now keepalived

查看服务状态和近期日志:

systemctl is-active keepalived
sudo journalctl -u keepalived -n 50 --no-pager

预期服务状态为 active。日志应显示实例进入稳定状态,没有持续的脚本执行错误、接口错误或 VRRP 通信异常。

验证 VIP 初始归属与客户端访问

分别在两台服务器查看网卡地址:

ip -br address show dev ens5

正常情况下,VIP 只应出现在一台服务器上。按照示例优先级,主节点 A 应持有 10.20.0.50/24,备用节点 B 不应持有该 VIP。

然后从外部客户端访问 VIP:

curl --connect-timeout 3 -fsS http://10.20.0.50/ha.txt

预期返回 node-a。如果 VIP 在主节点上,但客户端连不上,先检查服务商的 VIP 路由、安全组、主机防火墙和 Nginx 监听状态;不要仅凭 ip address 中出现了地址,就判断公网或私网访问链路已正常。

如需观察单播 VRRP 通信,可在其中一台服务器运行:

sudo tcpdump -ni ens5 'ip proto 112'

启动后让另一台服务器保持 Keepalived 运行。若两节点之间可见协议号 112 的报文,说明观察接口上收到了 VRRP 流量;如果没有报文,检查配置中的源地址、对端地址、网卡及网络 ACL。部分云平台会限制此类报文,是否支持应以服务商网络能力为准。

执行切换测试

测试前确认客户端能访问 VIP、两台服务器上的 Nginx 均正常,并确保测试窗口内没有其他操作人员同时重启服务。不要在正在承载关键业务的节点上直接进行未审批的故障演练。

测试 Nginx 健康检查触发切换

在当前持有 VIP 的主节点上停止 Nginx:

sudo systemctl stop nginx

等待健康检查连续失败。示例配置每 2 秒检查一次,连续失败 2 次后降低优先级;实际切换时间还会受到 VRRP 通告、网络传输和系统调度影响,不应把单一固定秒数当作所有环境的保证。

在两台服务器分别查看 VIP:

ip -br address show dev ens5

预期 VIP 从原主节点移除,并出现在运行正常的备用节点上。再从外部客户端访问:

执行切换测试:测试 Nginx 健康检查触发切换配图

curl --connect-timeout 3 -fsS http://10.20.0.50/ha.txt

预期返回 node-b。这说明测试期间 VIP 已转移到备用节点,并且客户端请求到达了备用节点的 Nginx。

恢复主节点 Nginx:

sudo systemctl start nginx
systemctl is-active nginx

确认 Nginx 状态为 active,再检查 Keepalived 日志和两台服务器上的 VIP 归属。由于主节点优先级较高,它恢复健康后可能重新取得 VIP,即发生自动回切。回切期间应再次从外部客户端访问 VIP,确认业务恢复且没有持续抖动。

测试 Keepalived 进程故障切换

健康检查测试通过后,还可在当前持有 VIP 的节点上模拟 Keepalived 停止:

sudo systemctl stop keepalived

从另一台服务器和外部客户端检查 VIP 是否转移、页面是否能访问。此操作会使当前节点停止参与 VIP 协商,测试结束后要立即恢复服务:

sudo systemctl start keepalived
systemctl is-active keepalived

恢复后再次确认两台节点的 VIP 归属和外部访问结果。不要使用强制删除地址等方式模拟故障;直接改网卡地址可能造成路由或 ARP 状态异常,使测试结果失真。

Keepalived 采用优先级决策时,主节点恢复后可能抢回 VIP。若业务不希望自动回切,应另行评估 nopreempt 等配置及切换策略;这会改变恢复行为,部署前应在测试环境验证,不能把“切换到备用节点”和“自动恢复到主节点”混为一项验收结果。

常见异常处理

配置检查通过,但 VIP 没有出现在任何节点。 查看 Keepalived 服务日志、网卡名称、VIP 掩码和两台节点的单播地址是否填写正确。确认没有其他实例占用相同的 virtual_router_id,也确认两台配置中的 VRRP 实例名称、ID 和 VIP 一致。

主节点有 VIP,但外部访问超时。 这通常不等于 Keepalived 切换失败。先在主节点本机执行 curl http://127.0.0.1/ha.txt,再从同网段客户端访问 VIP;逐层检查 Nginx 监听、操作系统防火墙、安全组和服务商路由。若服务商要求通过控制台或 API 绑定浮动 IP,应使用其支持的切换机制。

停止主节点 Nginx 后,备用节点未接管。 检查备用节点的 Nginx 和健康脚本是否正常,查看 Keepalived 日志中是否有脚本失败或权限错误;再确认主节点的有效优先级是否因 weight 调整而低于备用节点。若两台节点之间的 VRRP 协议报文被拦截,节点可能无法正确协商。

VIP 在两台节点上同时出现。 这属于高风险状态,可能造成流量不稳定。先确认两台服务器之间的 VRRP 通信和对端地址配置,检查是否存在重复实例或网络隔离,再按变更流程停止一侧 Keepalived,避免反复重启两侧服务扩大影响。修复后必须确认 VIP 只在一个节点上。

VIP 切换成功,但业务页面或数据不一致。 Keepalived 只管理 VIP,不同步文件、上传内容、会话、队列或数据库。应分别核对应用依赖的数据存储和复制状态,并设计主备写入边界、数据冲突处理及备份恢复方案。服务进程接管成功并不等于数据已经一致。

切换后客户端仍访问旧节点。 检查客户端是否使用了 VIP、网络设备是否缓存了邻居地址,以及服务商是否及时更新 VIP 路由。可以在客户端重新发起连接,并从两台节点分别观察访问日志;不要通过长期缓存旧 IP 的客户端测试结果判断切换是否完成。

结果检查与回滚

验收时应从节点、网络和业务三个层面核对结果。建议记录测试时间、测试动作、切换前后 VIP 所在节点、客户端返回内容和日志结果,便于后续排查。

验收项检查方法通过条件
配置有效两台节点执行 keepalived -t无配置错误
服务运行检查 Keepalived 和 Nginx 状态服务状态正常,无持续错误
初始 VIP 归属两台节点执行 ip -br addressVIP 只在预期节点上
外部访问客户端 curl VIP 测试页能收到当前持有节点的标识
健康检查切换停止持有 VIP 节点的 NginxVIP 转移,客户端可访问备用节点
进程故障切换停止持有 VIP 节点的 Keepalived备用节点按预期接管
恢复行为恢复服务后观察 VIP 和客户端回切行为符合已确认的策略
数据一致性检查应用与存储层状态独立于 VIP 切换完成验证

如果配置有误或测试后需要恢复,优先按变更流程在备用节点和主节点分别恢复备份配置。恢复前先确认当前 VIP 持有者和业务影响;不要在两台节点同时覆盖配置并同时重启,避免出现 VIP 短暂无主或双重持有。

恢复命令示例:

sudo cp -a /etc/keepalived/keepalived.conf.bak \
  /etc/keepalived/keepalived.conf
sudo keepalived -t -f /etc/keepalived/keepalived.conf

配置检查通过后,再按计划重启对应节点的 Keepalived:

sudo systemctl restart keepalived
systemctl is-active keepalived

如果原先没有备份配置,不要盲目执行恢复命令;应根据变更记录修正配置,或在确认业务影响后停止 Keepalived。停止 Keepalived 会使该节点退出 VIP 协商,可能触发切换,应先确认另一节点健康并能访问 VIP。

完成回滚后,最后逐项确认:两台节点服务状态正常;VIP 只由预期节点持有;外部客户端访问结果符合当前节点;没有持续的 VRRP、脚本或路由错误;若测试中涉及应用数据,还需单独核对复制状态和一致性。

本文由A5数据原创发布,转载请注明出处:https://www.a5idc.com/helpcontent/9224.html

相关推荐