美国服务器迁移PostgreSQL数据库,如何安排停机、校验与回退?

发布人:A5数据发布时间:2026-11-05 09:54阅读量:66

美国服务器迁移 PostgreSQL,真正需要安排的不是单纯更换 IP,而是确定目标服务器能否承载业务、源端与目标端是否兼容,以及切换后出现异常时能否在可接受的数据损失范围内退回。迁移前应明确数据库版本、数据规模、扩展、业务峰值和连接方式,再决定采用停机导出、物理复制还是逻辑复制。

停机窗口应按“最终同步耗时+停止写入时间+连接切换时间+验证时间+缓冲时间”计算。数据量较小且版本差异较大时,可以选择计划停机后使用 pg_dump 和 pg_restore;数据量较大或需要缩短停机时,应先完成预复制,再在短窗口内冻结写入、同步增量、切换连接并验证。回退也不能只写成“切回原服务器”,一旦目标端已经产生新写入,就必须提前设计数据回流或数据核对方案。

A5idc数据提供美国物理服务器租用,可为PostgreSQL迁移后的目标端部署、数据承载与业务运行提供资源基础。美国常规Xeon和AMD EPYC系列覆盖不同计算与内存需求,部分方案搭配NVMe存储,适合数据库及多任务服务运行;CN2 GIA等线路选项也便于结合美国用户访问和跨境业务安排网络资源,并支持从源端保留到目标端切换的服务器架构规划。

现状核对:先判断迁移路径和风险边界

1. 明确源端、目标端与业务影响范围

生产变更负责人应先建立一份源端和目标端对照表,不要直接从复制命令开始。至少核对以下内容:

核对项目源端需要确认目标端需要确认对迁移决策的影响
PostgreSQL版本主版本、补丁版本、运行参数是否支持源端数据格式和扩展跨大版本通常优先考虑逻辑迁移或逻辑备份
数据规模数据库总量、单表大小、索引量、增长速度磁盘容量、IOPS、备份空间、临时空间决定全量复制耗时和目标服务器规格
数据库对象表、视图、函数、触发器、序列、物化视图是否具备对应权限和对象依赖避免“数据到了,但应用无法运行”
扩展与外部依赖postgis、全文检索、FDW、定时任务等目标端是否能安装同版本或兼容版本扩展缺失时不能直接切换
业务连接应用配置、连接池、白名单、证书新 IP、端口、连接数、认证方式决定切换动作和恢复速度
网络位置源端到目标端的延迟、带宽和丢包美国东部、西部或其他机房的访问延迟影响复制延迟和业务响应时间
合规与数据范围是否包含个人信息、日志或备份数据目标区域、访问权限、保留周期需要在迁移前完成内部合规确认

如果目标节点采用 A5IDC 美国服务器,应将实际交付的 CPU、内存、存储类型、磁盘容量、带宽和 IP 资源纳入验收,而不是只根据套餐名称判断是否适合 PostgreSQL。数据库迁移期间通常需要源端和目标端并行运行,预算还应包含临时双机、快照、备份和可能的跨区域传输成本。

先在源端查看版本、字符集、排序规则、时区和数据库容量:

psql "$SOURCE_DSN" -X -c "
SELECT
    current_setting('server_version') AS server_version,
    current_setting('server_encoding') AS server_encoding,
    current_setting('lc_collate') AS lc_collate,
    current_setting('lc_ctype') AS lc_ctype,
    current_setting('TimeZone') AS timezone;
"

psql "$SOURCE_DSN" -X -c "
SELECT
    current_database() AS database_name,
    pg_size_pretty(pg_database_size(current_database())) AS database_size;
"

psql "$SOURCE_DSN" -X -c "
SELECT
    datname,
    pg_size_pretty(pg_database_size(datname)) AS database_size
FROM pg_database
WHERE datallowconn = true
ORDER BY pg_database_size(datname) DESC;
"

SOURCE_DSN 只是连接字符串占位符,生产环境不应把数据库密码直接写在命令历史中。可以使用权限为 600 的 .pgpass 文件、受控的环境变量或密钥管理系统。

2. 按版本、数据量和停机要求选择迁移方式

常见路径可以按以下条件判断:

迁移方式适用条件停机特点主要限制
pg_dump/pg_restore数据量较小、可以接受完整维护窗口、需要跨大版本全量导出和恢复通常在停机窗口内完成数据量大时窗口不可控,恢复速度受磁盘和索引影响
物理复制或基础备份源端和目标端主版本一致,目标端接管整个集群大部分复制时间可放在窗口外,切换时间较短不适合选择性迁移,版本、架构和集群配置要求较严格
逻辑复制数据量较大,需要提前同步,或需要跨主版本迁移初始同步在窗口外,最终窗口只处理增量和切换DDL、序列、角色、权限和部分特殊对象需要单独处理
备份恢复加二次校验业务允许较长停机,强调过程简单可审计停机时间较长,但流程较容易复盘对大库和高写入业务不友好

pg_dump 可以跨 PostgreSQL 大版本迁移,但不能因此忽略扩展和排序规则兼容性。物理复制通常要求相同主版本,且目标端应作为源端集群的兼容副本使用。逻辑复制并不会自动复制所有数据库对象,表结构、DDL 变更、序列推进、角色权限、外部表和定时任务都要列入单独清单。

如果存在没有主键的表,还需要确认逻辑复制对 UPDATE 和 DELETE 的识别方式。部分表可能需要配置合适的 REPLICA IDENTITY,但这会增加日志和执行开销,不能在生产高峰前临时修改而不做测试。

3. 用有效速率估算数据传输和停机时间

不要直接使用网卡标称带宽估算迁移时间。加密、压缩、磁盘读写、索引创建、数据库并发负载和网络抖动都会降低有效速率。

以十进制单位计算,若需要传输 300 GB 数据,实际有效速率为 80 MB/s:

  • 300 GB = 300,000 MB
  • 传输时间 = 300,000 MB ÷ 80 MB/s = 3,750 秒
  • 3,750 秒约等于 62.5 分钟

这里的 80 MB/s 等于约 640 Mbps,不能与 80 Mbps 混用。如果有效速率只有 100 Mbps,则:

  • 300 GB × 8 × 1000 ÷ 100 Mbps = 24,000 秒
  • 24,000 秒约等于 400 分钟,也就是约 6.7 小时

这只是数据传输时间,不包含数据库导出、恢复、索引创建、校验和失败重试。对于大库,应把全量复制放到停机窗口之外,停机窗口只计算最后增量、连接切换和业务验证。

变更准备:先建立可恢复的状态

1. 验收目标服务器,而不是只检查能否登录

目标服务器至少应满足以下条件:

  • PostgreSQL 主版本、扩展版本、字符集和排序规则经过确认。
  • 可用磁盘覆盖现有数据、索引、WAL、临时文件、备份和未来增长。
  • 峰值连接数、内存、CPU 和磁盘吞吐有余量。
  • 目标端具备必要的角色、权限、证书和认证配置。
  • 应用服务器能够通过目标端 IP 或域名连接。
  • 监控已覆盖 CPU、内存、磁盘使用率、IO 等待、连接数、锁等待、慢查询和错误日志。
  • 源端和目标端的时区、NTP 同步策略及应用时间处理方式一致。

数据库当前大小不等于目标磁盘的最低容量。索引重建、恢复过程和临时排序可能产生额外空间,迁移期间还要保存 WAL 和备份文件。生产环境不宜把磁盘长期运行在接近满载的状态,通常应预留至少 20% 至 30% 的可用空间,并根据增长速度扩大余量。

2. 完成备份、校验和恢复演练

迁移前至少保留两类备份:

  1. 数据库逻辑备份,用于跨版本恢复或局部核对。
  2. 角色、权限和全局对象备份,用于恢复登录角色、表空间定义等信息。

示例命令如下:

mkdir -p /backup/postgresql

pg_dumpall --globals-only "$SOURCE_DSN" \
  > /backup/postgresql/globals-$(date +%F).sql

pg_dump -Fc --file=/backup/postgresql/appdb-$(date +%F).dump \
  "$SOURCE_DSN"

pg_restore --list /backup/postgresql/appdb-$(date +%F).dump \
  > /backup/postgresql/appdb-$(date +%F).toc

sha256sum \
  /backup/postgresql/globals-$(date +%F).sql \
  /backup/postgresql/appdb-$(date +%F).dump \
  > /backup/postgresql/checksums-$(date +%F).sha256

上述备份文件需要复制到独立存储,并在目标环境完成一次恢复演练。恢复时应使用干净的测试数据库或临时实例,先检查角色、扩展、表结构和关键数据,再验证应用连接。不要在未确认对象归属和备份可用性的情况下,对生产数据库使用带有 --clean 或批量删除对象的恢复命令。

如果使用逻辑复制,应至少保留切换前的完整备份。复制槽会保留尚未消费的 WAL,复制异常时可能快速占满源端磁盘,因此必须监控复制槽和 WAL 保留量:

SELECT
    slot_name,
    slot_type,
    active,
    pg_size_pretty(
        pg_wal_lsn_diff(pg_current_wal_lsn(), restart_lsn)
    ) AS retained_wal
FROM pg_replication_slots;

3. 准备连接切换和安全策略

迁移前应将应用连接信息抽象为可修改的配置项,尽量避免把数据库 IP 硬编码在多个服务中。若使用域名切换,应提前降低 DNS TTL,但不能把 DNS 切换当作唯一方案,因为已有连接池和长连接不会立即重新解析。

防火墙和安全组只开放源端、目标端和必要应用服务器的访问范围。若必须通过公网传输,应启用 PostgreSQL TLS,并限制来源 IP;不要为了测试临时开放整个互联网访问。修改防火墙前应记录现有规则,确认带外控制台或管理入口可用,并安排一条已验证的恢复路径。

目标端口连通性可以先用非破坏性检查:

pg_isready -h TARGET_DB_HOST -p 5432 -d appdb
psql "$TARGET_DSN" -X -c "SELECT now(), version();"

4. 把停机窗口写成可执行时间表

一个可供评审的时间表应包含负责人、开始条件、完成标准和失败动作。例如:

阶段主要动作完成标准
T-7 至 T-3 天版本、扩展、容量和网络核对差异项有负责人和处理期限
T-2 至 T-1 天完成备份、恢复演练、目标端初始化备份可读,测试连接正常
T-1 天降低 DNS TTL、通知业务方、冻结非必要发布变更窗口内无并行发布
T-30 分钟检查复制延迟、磁盘和长事务延迟在预设阈值内
T 时刻进入维护模式、停止写入、完成最终同步新写入已停止,增量同步完成
T+切换连接、执行验证核心读写和关键任务通过
观察期监控错误、性能和数据一致性覆盖至少一个业务高峰

分步实施:先复制,再短时切换

1. 先做一次完整演练

演练不能只验证“数据库能启动”,还应模拟以下动作:

  • 应用进入维护模式并停止新写入。
  • 连接池清空旧连接。
  • 目标端接收应用连接。
  • 关键查询、写入、事务和后台任务运行。
  • 目标端出现故障时,应用如何恢复到源端。
  • 旧服务器是否仍保留完整备份和可用连接。

演练使用的数据量、索引规模和扩展情况应尽量接近生产。若只使用几百 MB 的测试库,无法说明数百 GB 生产库的恢复时间。

2. 选择合适的预复制策略

小型数据库可以在维护窗口内直接导出和恢复。恢复完成后,按对象清单检查表、索引、约束、触发器、函数和权限,再开放应用。

中大型数据库可采用物理复制或逻辑复制:

  • 物理复制适合整个集群迁移,目标端与源端版本、系统架构和存储条件应保持兼容。
  • 逻辑复制适合选择性迁移或跨大版本迁移,但需要先同步表结构,再同步数据。
  • 逻辑复制初始同步期间要监控复制延迟、源端 WAL 增长和目标端磁盘。
  • DDL 变更通常不能依赖逻辑复制自动完成。迁移准备期间应暂停非必要的表结构变更。
  • 序列值、角色权限、默认权限、扩展、定时任务和大对象需要单独核对。
  • 对没有主键的表、频繁更新的大表和高并发写入表,应在演练中确认一致性表现。

如果源端持续写入,逻辑复制的“已同步”不等于“完全一致”。切换前仍需要冻结写入,并确认目标端已经追平最后一批变更。

3. 执行最终停机和连接切换

正式窗口建议按以下顺序执行:

  1. 通知业务方进入变更窗口,暂停应用发布、批处理和会修改数据库的定时任务。
  2. 让应用进入维护模式,停止新的写入请求,并等待正在执行的事务完成。
  3. 检查源端是否还有长事务、未完成批处理或大量连接。
  4. 等待物理复制或逻辑复制追平;若采用逻辑复制,确认复制槽没有异常积压。
  5. 对关键表执行源端和目标端的数据核对。
  6. 将应用连接指向目标端,逐步恢复应用实例,不要一次性启动所有连接。
  7. 先执行少量读请求和受控写入,确认事务、序列和权限正常。
  8. 恢复后台任务和批处理,并持续观察错误日志和数据库指标。

长事务检查可以使用以下查询:

SELECT
    pid,
    usename,
    application_name,
    client_addr,
    state,
    xact_start,
    now() - xact_start AS transaction_age,
    wait_event_type,
    wait_event
FROM pg_stat_activity
WHERE xact_start IS NOT NULL
ORDER BY xact_start;

不要直接批量终止所有连接。应先定位具体应用、任务或连接池,再根据变更方案处理。终止会话可能导致事务回滚、任务重复执行或业务请求失败。

验证观察:数据、业务和性能要分别验收

1. 先做连接与对象验证

切换后先检查目标端的版本、当前数据库、时区和基本连接状态,再验证角色和扩展:

SELECT
    current_database(),
    current_user,
    current_setting('server_version'),
    current_setting('TimeZone');

SELECT
    extname,
    extversion
FROM pg_extension
ORDER BY extname;

随后按清单确认:

  • 应用账号可以连接,但权限没有超出设计范围。
  • 核心表、索引、约束、触发器、函数和视图存在。
  • 关键扩展版本可用。
  • 连接池没有继续指向源端。
  • 读写分离、后台任务、报表程序和备份任务使用了正确的数据库地址。
  • 目标端日志中没有认证失败、权限拒绝、扩展缺失或排序规则错误。

2. 在停止写入状态下做数据一致性核对

数据核对不能只看数据库总大小。建议对关键业务表执行以下几类检查:

  • 行数:订单、账户、库存、支付记录等核心表。
  • 主键范围:最小 ID、最大 ID、最新时间。
  • 金额或数量汇总:订单金额、余额、库存数量。
  • 关键状态分布:成功、处理中、失败等状态数量。
  • 抽样记录:选择迁移前已记录的 ID,比较字段值。
  • 约束结果:检查孤立外键、重复主键和空值异常。
  • 序列值:比较序列当前值与表中最大 ID,避免切换后插入主键冲突。

示例核对语句需要替换为实际表名和字段名:

SELECT
    count(*) AS row_count,
    min(id) AS min_id,
    max(id) AS max_id,
    max(updated_at) AS latest_update
FROM public.orders;

SELECT
    status,
    count(*) AS status_count
FROM public.orders
GROUP BY status
ORDER BY status;

如果源端仍在写入,源端和目标端的行数差异不一定是故障。因此,最终核对应放在停止写入、复制追平之后,并记录核对时间点。

3. 通过真实业务路径验证

数据库层面的 SELECT 1 不能替代业务验收。至少应选择低风险测试数据验证:

  • 用户登录、查询和列表分页。
  • 新建一条可撤销的业务记录。
  • 更新状态并确认事务提交。
  • 查询报表或后台管理页面。
  • 执行一个需要事务和多表关联的核心流程。
  • 检查消息队列、异步任务和定时任务是否重复执行。
  • 检查应用错误率、响应时间和数据库连接池等待。

写入验证应使用明确标记的测试记录,并在确认后按照业务规则清理。清理动作涉及删除时,应先确认备份和影响范围,避免误删正式数据。

4. 设定观察窗口和指标阈值

切换后至少观察一个完整业务高峰。低流量业务可以安排 2 至 4 小时观察,关键交易系统更适合保留 24 小时以上的源端只读副本和备份。

回退阈值应以迁移前基线为依据。可以采用以下示例作为评审起点,再按实际业务调整:

  • 核心接口错误率连续 10 分钟高于基线明显水平,或出现持续的数据库连接失败。
  • 核心查询 P95 延迟达到迁移前约 2 倍,并持续超过 10 分钟。
  • 出现无法解释的数据计数差异、主键冲突、序列回退或关键表缺失。
  • 目标端磁盘、WAL、连接数或锁等待持续增长,且短时间内无法恢复。
  • 复制未追平、关键扩展不可用或业务批处理出现重复执行。

这些阈值不是通用保证值,应写进变更单,并由业务负责人、数据库负责人和应用负责人共同确认。

回滚条件:是否产生新写入决定回退方式

1. 在目标端尚未写入时,回退最简单

如果切换后只做了连接测试,或者目标端仍处于只读状态,没有产生正式业务写入,可以:

  1. 立即暂停应用请求。
  2. 将连接恢复到源端。
  3. 清理目标端测试连接和临时配置。
  4. 检查源端仍可写,验证关键业务。
  5. 保留目标端数据和日志,记录失败原因,不要立即删除。

这种方式要求源端在观察期内保持完整、可写或可快速恢复的状态。

2. 目标端产生新写入后,不能直接切回源端

一旦目标端已经接受正式写入,源端和目标端就可能产生数据分叉。此时直接把连接指回源端,会造成目标端新增数据丢失,或者后续同步出现主键冲突。

回滚条件:是否产生新写入决定回退方式配图

可选处理方式包括:

  • 提前设计反向逻辑复制或受控的数据回流流程。
  • 暂停全部写入,导出目标端切换后的新增和变更数据,与源端进行核对后合并。
  • 以目标端为准,修复应用或数据库问题,不执行回退。
  • 在明确允许数据损失的情况下,从目标端备份恢复源端,但必须由业务方确认损失范围。

如果没有经过演练的反向同步方案,就不要把“切回旧 IP”写成目标端已写入后的标准回滚动作。更稳妥的做法是,在切换前保留源端、备份和日志,在切换后先把异常分为可修复故障与数据一致性故障,再决定回退还是继续修复。

3. 明确释放旧服务器的时间点

源端不应在切换成功后立即关机或销毁。至少应保留以下内容:

  • 切换前完整备份。
  • 目标端切换后的备份。
  • 源端和目标端数据库日志。
  • 迁移命令、校验结果和监控记录。
  • 应用配置变更和防火墙变更记录。

只有当目标端完成数据、业务和性能验收,观察窗口覆盖主要业务峰值,且没有触发任何回滚条件后,才考虑停止源端数据库服务或释放旧服务器。若仍处于高风险业务周期,应继续保留源端只读副本和独立备份。

最终的变更单应明确三件事:何时停止写入、由谁确认切换成功、哪些现象必须触发回退。没有可验证的备份、没有经过演练的恢复流程,或者目标端的版本与扩展兼容性尚未确认时,不应安排正式迁移窗口。

本文由A5数据原创发布,转载请注明出处:https://www.a5idc.com/helpcontent/7633.html

相关推荐