韩国服务器部署Corosync与Pacemaker时,两个组件怎样协同完成故障切换?

发布人:A5数据发布时间:2026-11-13 10:50阅读量:41

韩国服务器上的 Corosync 与 Pacemaker,分别解决“集群节点如何形成可靠成员关系”和“故障后由谁决定资源迁到哪里”两个问题。Corosync负责节点间通信、成员状态与仲裁所需的信息传递;Pacemaker依据这些信息、资源监控结果和约束策略,决定是否执行恢复、在哪台节点启动资源,以及资源之间按什么顺序切换。两者协同可以管理故障切换,但不会自动复制数据库,也不能单独保证数据一致性。

因此,设计高可用集群时要同时回答三个问题:节点如何判断彼此是否存活,原节点失联后如何确保它不再写入,应用所需的数据如何在目标节点上保持可用。只配置两个软件而没有复制、隔离和仲裁设计,可能做到进程重启,却仍然丢数据或发生双主。

一、先看业务链路与单点故障

以韩国机房内的双节点业务为例:客户端请求进入Web服务,再由应用访问数据库;服务地址可能通过浮动IP切换,数据库则使用共享存储或经过复制的数据。节点A承担服务,节点B待命。A发生硬件故障、内核崩溃或服务进程异常时,集群需要确认故障范围,隔离A,再由B接管资源。

这条链路中,故障并不只有“服务器宕机”一种:

  • 节点故障:主机掉电、系统崩溃,Corosync成员状态变化,Pacemaker评估资源能否迁移。
  • 进程故障:数据库或应用进程停止,但节点通信仍正常。Pacemaker的资源监控可以发现异常,并尝试重启或迁移。
  • 网络分区:节点之间通信中断,但两台机器可能都还在运行。若双方都认为自己应当提供服务,就可能出现双主写入。
  • 存储或复制链路故障:节点仍然在线,但目标节点可能没有最新数据,或无法安全挂载共享卷。此时“能够启动服务”不代表“可以安全接管”。

韩国服务器这一环境本身不会改变 Corosync 与 Pacemaker 的分工,但会影响网络和故障域设计。若两台服务器位于同一机房,节点间通常更容易获得稳定、低延迟的通信,适合以较短检测时间进行切换;但同机房供电、交换网络或存储故障仍可能同时影响两台节点。若跨机房或跨区域部署,则要额外考虑链路延迟、抖动和分区风险,不能只把同机房集群配置原样复制过去。

二、Corosync、Pacemaker和资源代理各自负责什么

Corosync负责集群通信与成员信息。它让节点交换心跳和集群消息,形成成员视图,并为仲裁机制提供基础信息。节点是否仍属于当前集群、成员关系何时改变,都会影响 Pacemaker 后续的决策。Corosync不负责判断数据库是否有可用数据,也不负责启动数据库服务本身。

Pacemaker负责资源管理与恢复策略。资源可以是数据库、应用服务、文件系统挂载点或浮动IP等。Pacemaker根据节点状态、资源监控结果、资源约束和仲裁状态,安排启动、停止、迁移或恢复。它不仅处理“某个进程是否运行”,还可以表达资源的依赖关系,例如先挂载文件系统,再启动数据库,最后启动应用和服务地址。

资源代理负责把资源状态转换为具体操作。Pacemaker通常通过资源代理调用服务管理接口或执行相应检查。代理需要能够可靠判断资源是否运行,并以可重复的方式执行启动、停止和监控。资源代理能报告某个服务异常,但它不能替代应用层健康检查:进程存活不等于应用已经能正常处理请求。

STONITH(节点隔离)负责阻止故障节点继续提供服务。当节点失联时,仅凭网络心跳无法证明它已经关机。通过带外管理、电源控制等方式确认并隔离故障节点,可以避免旧主机仍访问存储或继续接受写请求。Pacemaker通常通过 fencing 资源执行这类动作。没有可用、经过验证的隔离机制时,自动切换的安全性会明显下降。

存储复制不属于这两个组件的职责。共享存储需要处理存储访问和挂载约束;主从数据库复制要处理复制状态、提升条件及旧主恢复后的数据处置;块设备复制则要定义复制模式和脑裂保护。Pacemaker可以编排这些资源,却不会自动补齐复制协议。

组件或机制主要职责不负责的事项
Corosync节点通信、成员状态、仲裁所需信息数据库复制、应用健康判定、资源切换策略
Pacemaker资源监控、恢复决策、启动顺序与节点放置生成数据副本、保证业务逻辑正确
资源代理启停并检查具体服务或资源替代应用级可用性检查
STONITH隔离不确定状态的旧节点复制数据、修复存储
数据库或存储复制机制维护数据副本及其一致性语义决定集群成员关系和完整的资源编排

三、故障发生时,两者如何协同切换

正常运行时,Corosync维持集群成员信息,Pacemaker依据资源配置让指定节点运行服务,并通过监控操作检查资源状态。监控间隔、超时和重试次数会影响故障识别速度:设置得过于敏感,短暂的网络抖动或繁忙状态可能触发不必要的切换;设置得过于宽松,真实故障被发现得更晚。具体取值应结合服务启动时间、网络状况和业务可接受中断时间测试,而不是照搬固定数字。

当A上的应用进程异常时,资源代理的监控结果会反馈给 Pacemaker。若只是可恢复的进程故障,Pacemaker可以按策略先尝试在A重启;若连续恢复失败,或节点整体不可用,再评估迁移到B是否安全。资源之间若设置了顺序约束,切换可能按“确认存储可用—挂载文件系统—启动数据库—启动应用—配置服务地址”的顺序进行。具体顺序取决于架构:数据库集群自身负责切换时,编排关系可能不同。

当A与B失去通信时,重点不只是发现成员变化,而是避免两台节点同时提供写服务。Corosync的成员与仲裁机制帮助集群判断哪一侧具备继续管理资源的条件;Pacemaker在满足策略条件后执行隔离和资源恢复。若隔离尚未完成,或者仲裁状态不允许安全接管,宁可暂缓启动,也不应让两台机器都写入同一份数据。

一个简化的故障时序如下:

三、故障发生时,两者如何协同切换配图

  1. A发生故障或与B的集群通信中断,Corosync更新成员状态。
  2. 集群依据仲裁规则判断是否存在可以继续管理资源的一侧。
  3. 必要时执行 STONITH,确认A已被隔离,不能继续访问业务资源。
  4. Pacemaker检查B是否具备接管条件,包括资源约束、存储状态和复制状态。
  5. 按依赖顺序在B启动资源,最后让业务流量到达B。
  6. A恢复后先作为待确认节点加入,不应仅因恢复通信就自动抢回写入角色。

这个流程中,Corosync提供的是集群状态基础,Pacemaker负责策略和资源动作,隔离机制消除旧主继续工作的风险,复制或共享存储方案决定数据是否可接管。任何一环缺失,都可能导致“切换成功”只是服务进程启动成功,而非业务安全恢复。

四、仲裁、复制与部署拓扑如何取舍

双节点仲裁与第三方仲裁

双节点集群面对网络分区时,无法仅靠“哪台先发现故障”可靠判断另一台是否已经停止。可考虑引入第三方仲裁设备(qdevice等),为两节点之间的决策提供额外仲裁信息。第三方仲裁本身应部署在独立故障域,并评估它与两台节点的网络连通性;若仲裁服务与某一节点共用同一故障点,实际收益会打折。

某些双节点配置可以采用特定的双节点仲裁策略,但它不能替代 fencing。部署时应核对所用发行版、Corosync和Pacemaker版本支持的仲裁及隔离行为,避免只看到集群显示“在线”就认为分区风险已经解决。

共享存储与数据复制

共享存储适合由集群控制同一份数据卷在某一时刻仅由允许的节点访问。切换时要确保旧节点已被隔离,再由新节点挂载并启动服务。此方案需要关注存储链路冗余、文件系统类型、挂载限制及存储自身的高可用能力;共享存储并不等同于数据已经有独立副本。

数据库主从复制可以减少共享存储依赖,但必须明确复制模式和提升条件。异步复制通常有更低的写入等待成本,但主节点突然故障时,尚未传到备节点的事务可能丢失;同步或近同步策略可降低这一风险,却会使写入受节点间网络延迟影响。复制延迟、日志位置、选主规则和旧主重新加入后的数据处理,应由数据库自身机制与 Pacemaker 资源策略共同定义,不能仅凭“备节点进程正常”就提升为主节点。

方案主要优势主要风险与核对点
共享存储切换时使用同一数据卷,减少复制状态判断存储自身可能成为故障点;必须保证单节点访问和正确隔离
异步数据库复制写入通常不必等待备节点确认主节点故障时可能丢失尚未复制的数据;需定义可接受的数据损失范围
同步或近同步复制可降低已确认事务丢失的可能网络延迟可能影响写入;链路中断时需要明确业务是停止写入还是降级
跨机房集群可覆盖部分机房级故障延迟、网络分区和故障域更复杂;必须验证仲裁、隔离和复制策略

同机房与跨区域部署

若目标是应对单台服务器或单个服务故障,韩国同一机房内的双节点部署通常更容易控制通信延迟和资源切换时间,但机房级故障仍需通过备份、异地副本或灾备方案应对。若把节点分布到不同机房,Corosync通信质量、仲裁部署位置、复制延迟和故障切换后的业务入口都会成为设计条件。跨区域集群并非天然更安全:如果网络分区后双方都能接收请求,缺少严格的仲裁与 fencing 反而可能放大数据风险。

A5idc数据提供韩国首尔等多个地区的物理服务器,涵盖不同CPU、存储配置及优化或国际线路,可为Corosync与Pacemaker集群中的业务节点、数据库服务和应用负载提供部署资源。对于韩国本地业务,可结合实际部署区域与负载选择相应硬件;多地区资源也为异地业务布局提供基础。

五、把恢复目标落实到资源策略

RTO是业务从故障发生到恢复服务所能接受的时间;RPO是故障时可接受的数据回退范围。两者需要结合业务写入量、复制方式、监控周期、隔离耗时、资源启动时间和流量切换方式来估算,不能由“采用Pacemaker”直接推导出固定数值。

例如,某业务设定的目标是数分钟内恢复服务,并且允许少量未复制事务丢失,那么异步复制可能符合成本与性能取舍,但需将复制延迟纳入RPO评估。若业务不能接受已确认交易丢失,则应评估同步复制、存储方案及网络条件,同时接受其可能带来的写入时延或链路故障时的可用性取舍。这些是架构目标示例,最终指标应通过故障演练和业务验收确定。

Pacemaker的资源约束应明确表达哪些资源必须一起移动、哪些资源必须先后启动,以及某节点失去资格后是否允许资源转移。还要区分“自动恢复”和“自动回切”:节点恢复后立即把业务迁回,可能造成第二次中断;不少生产环境会让服务继续留在当前健康节点,待维护窗口再人工迁回。选择自动回切时,应验证节点稳定时间、数据追平状态和重复切换抑制策略。

六、运行中需要持续验证的边界

集群配置完成并不等于故障切换已验证。需要按业务链路检查:节点失联时仲裁是否符合预期,fencing是否确实隔离旧节点,资源是否按顺序启动,数据库是否以正确角色提供服务,业务入口是否已经转向新节点,以及旧节点恢复后是否会错误地重新加入写入。

建议至少覆盖以下场景:

  • 单个应用或数据库进程停止,验证Pacemaker是重启还是迁移,结果是否符合策略。
  • 服务器掉电或内核故障,验证隔离动作、资源接管时间及数据状态。
  • 节点间网络中断但主机仍运行,验证不会出现双主或两侧同时写入。
  • 复制链路中断或备节点落后,验证集群是否阻止不安全提升。
  • 旧节点恢复,验证其是否先检查存储或复制状态,再重新加入集群,而不是直接抢回业务。

监控指标应覆盖 Corosync成员变化、仲裁状态、Pacemaker资源失败与迁移记录、fencing结果、数据库角色及复制延迟。只监控CPU、内存和端口存活,无法判断集群是否处于可安全接管状态。配置、资源代理和隔离设备也需要纳入版本变更管理;升级前应确认兼容性,并安排可观察、可中止的维护窗口。

判断一套韩国服务器上的 Corosync 与 Pacemaker 方案是否成立,重点不在于两套软件是否启动,而在于故障时能否形成一致的成员与仲裁判断、能否隔离旧节点、能否确认目标节点的数据可用,并且能否按业务目标恢复流量。下一步应以实际拓扑执行节点掉电、网络分区和复制延迟演练,记录RTO、数据状态与回切行为,再据此调整仲裁、隔离和资源约束。

本文由A5数据原创发布,转载请注明出处:https://www.a5idc.com/helpcontent/9177.html

相关推荐