日本服务器运行PostgreSQL适合哪些负载,何时需要拆分数据库资源?

发布人:A5数据发布时间:2026-10-19 09:37阅读量:84

日本服务器运行 PostgreSQL 是否合适,关键不在于“日本”这个地域标签,而在于应用服务器、数据库、主要用户和备份链路是否处于合理的位置,以及业务属于事务处理、读多写少、混合分析还是高频写入。以日本及东亚用户为主、应用与数据库部署在同一地区、数据规模和写入量可预测的业务,通常更容易发挥 PostgreSQL 的适用性。

真正需要拆分数据库资源的时点,也不是单纯看数据表变大,而是数据库已经与应用、报表、备份或其他租户争抢 CPU、内存、存储 I/O,或者业务开始要求独立扩容、独立维护和更高的可用性。企业技术负责人应先拆分负载,再决定继续共用一台服务器、独立数据库服务器、增加只读副本,还是进一步采用分区或分片。

先拆分业务负载,而不是先决定服务器

同一个 PostgreSQL 集群可能同时承载订单、用户、后台报表和设备数据,但这些负载对资源的需求并不相同。选型时应先区分主要工作类型。

事务型业务

典型场景包括:

  • B2B SaaS 的租户、用户、合同和权限数据;
  • 电商的商品、库存、订单和售后状态;
  • 企业内部系统、客户管理系统和工单系统;
  • 内容平台的账户、文章元数据、评论和审核状态;
  • API 后端的结构化业务数据。

这类业务通常要求单次查询响应稳定、事务一致性明确,并且需要处理一定数量的并发读写。PostgreSQL 的事务、约束、索引、JSONB、全文检索和复杂查询能力,能够覆盖许多中小型到中型业务。

如果主要用户位于日本,应用服务和 PostgreSQL 同在日本机房,应用与数据库之间可以保持较低且稳定的网络时延。需要注意的是,低时延并不等于数据库一定性能良好;低效 SQL、锁竞争、索引缺失和存储延迟,仍可能成为主要瓶颈。

读多写少的业务

内容展示、商品目录、知识库、查询型 API 等业务,通常读取请求明显多于写入请求。此时数据库内存、缓存命中率、索引设计和连接池配置,往往比单纯增加 CPU 更重要。

如果读请求增长较快,可以先优化查询和缓存,再考虑只读副本。只读副本适合分担可接受短暂数据延迟的查询,但不能直接解决主库写入压力,也不能替代完整备份。

事务与分析混合的业务

在线业务和报表查询共用一个数据库,是最常见的资源冲突来源之一。例如,订单系统白天处理交易,运营团队同时执行跨月聚合、导出明细和多表关联查询。分析 SQL 可能消耗大量 CPU、内存和磁盘读取能力,导致在线接口的 P95、P99 延迟明显升高。

事务与分析混合的业务配图

这类业务不一定需要立即更换数据库类型,但通常应考虑以下顺序:

  1. 优化慢查询、索引和报表时间范围;
  2. 将报表查询转移到只读副本;
  3. 将历史数据归档,减少在线表扫描范围;
  4. 当分析规模继续增长时,使用独立分析库或数据仓库。

只读副本只能降低主库的部分读取压力。若报表本身需要大量写入临时表、复杂排序或长事务,仍应观察副本的 CPU、内存、磁盘和复制延迟。

高频采集和时间序列负载

设备遥测、日志、埋点和监控数据,看起来也是“写入 PostgreSQL”,但数据增长速度可能远高于普通业务表。

例如,1 万个设备每秒写入一条记录:

高频采集和时间序列负载配图

  • 每天记录数:10,000 × 86,400 = 864,000,000 条;
  • 如果每条原始记录按约 200 字节估算,仅数据本身约为 172.8 GB/天;
  • 实际容量还要加上索引、WAL、表膨胀、备份和保留周期。

这个量级不适合直接采用普通订单表的设计方式长期累积。可以考虑批量写入、按时间分区、冷热数据分层、聚合后保留,以及把原始数据写入更适合的采集或分析系统。PostgreSQL 可以参与其中,但不应默认由单个主库承担所有原始数据、实时查询和长期分析任务。

判断日本服务器适配性的关键变量

用户、应用和数据库的地理位置

数据库请求通常由应用服务器发起,而不是由最终用户直接访问。因此优先级通常是:

用户、应用和数据库的地理位置配图

  1. 主要用户访问应用的区域;
  2. 应用服务器到 PostgreSQL 的网络距离和稳定性;
  3. 数据库到备份、对象存储或其他依赖服务的链路;
  4. 是否需要跨区域容灾。

如果用户、应用和数据库主要位于日本,日本服务器通常具有较清晰的部署路径。若用户分布在多个国家或地区,应分别测试应用访问时延和跨区域数据库访问时延,而不能仅凭机房所在地判断体验。

对于跨区域部署,通常不建议让多个应用节点频繁直接访问远距离主数据库。一次事务包含多次数据库往返时,网络时延会被放大。可以将应用与主数据库放在同一主要区域,再通过缓存、异步任务或只读副本服务其他区域。

CPU:查询复杂度比请求数更重要

CPU 消耗主要来自:

  • 多表关联和复杂过滤;
  • 排序、分组和聚合;
  • JSONB、全文检索等计算;
  • 大量并发连接带来的上下文切换;
  • 索引维护、VACUUM 和后台任务;
  • 高并发写入时的事务处理。

“每秒多少请求”不能单独作为容量标准。一个简单主键查询和一个跨多表聚合查询,对 CPU 的消耗可能相差很大。评估时应区分读请求、写事务、查询类型和并发方式,并使用接近生产数据量的测试数据验证。

内存:缓存和并发会同时消耗资源

PostgreSQL 会利用内存缓存常用数据页,操作系统也会进行文件缓存。内存不足时,数据库更容易频繁访问磁盘,查询延迟可能出现波动。

另一方面,连接数和排序、哈希等操作也会消耗内存。不能简单地把 max_connections 调得很高来应对并发。更合理的方式通常是:

  • 应用使用连接池;
  • 控制数据库后端连接数量;
  • 根据查询类型评估 work_mem;
  • 观察活跃连接、等待事件和内存使用;
  • 避免为少量复杂查询设置过高的全局内存参数。

如果同一台服务器还运行应用、缓存、定时任务或日志处理程序,数据库可用内存会进一步减少。

存储:容量、延迟、IOPS和耐久性要分开看

PostgreSQL 的 WAL、索引更新、随机读取和检查点操作,都可能对存储产生压力。选择存储时至少要区分:

  • 可用容量;
  • 随机读写延迟;
  • IOPS;
  • 顺序吞吐;
  • 写入耐久性;
  • 快照和备份期间的性能变化;
  • 磁盘故障后的恢复方式。

本地 NVMe 通常有较低的访问延迟,但具体耐久性、故障处理和数据保留方式取决于服务器平台。网络块存储便于扩容和迁移,但延迟与 I/O 性能需要通过实际规格和压力测试确认。无论使用哪种存储,都不能把快照当成唯一备份,更不能忽略恢复测试。

连接数、锁和事务持续时间

数据库资源被耗尽时,原因不一定是 CPU 或磁盘。以下问题也可能使系统表现为“数据库变慢”:

  • 大量空闲但未释放的连接;
  • 长事务阻塞 VACUUM;
  • 更新同一批记录造成行锁等待;
  • 事务未提交导致版本无法回收;
  • 复制槽保留大量 WAL;
  • 应用在高峰期集中创建连接。

判断是否需要拆分前,应先查看数据库活动状态和等待事件。若资源拆分后仍保留长事务、无效索引或连接泄漏,问题不会自动消失。

数据增长和维护窗口

数据库容量增长不仅影响磁盘采购,还会影响:

  • 备份耗时;
  • 恢复耗时;
  • VACUUM 和索引维护;
  • 版本升级;
  • 表结构变更;
  • 数据归档;
  • 复制追赶能力。

例如,当前数据库只有 100 GB,但每天新增 5 GB,且保留两年,理论原始数据就可能达到约 3.65 TB,还没有计算索引、WAL、备份和预留空间。容量评估应以增长速度和保留策略为基础,而不是只看当前占用量。

方案取舍:共用、独立、只读副本还是进一步拆分

不同拆分方式解决的问题不同,不能把它们看成同一层级的替代方案。

方案主要解决的问题优点需要承担的代价
应用与数据库共用一台服务器业务规模较小、部署简单网络路径短,成本和运维复杂度较低应用和数据库争抢 CPU、内存、磁盘,单机故障影响范围较大
同一主机内使用容器或虚拟机隔离初步限制资源使用部署灵活,可设置资源上限物理存储和主机故障仍可能共用,隔离能力取决于平台
独立 PostgreSQL 服务器应用与数据库资源冲突可独立扩容和维护,故障边界更清晰增加服务器、网络、安全、备份和运维成本
增加只读副本读请求和报表压力可分担部分读取和导出任务通常存在复制延迟,不能直接分担主库写入
按表分区大表查询、归档和维护可以按时间或业务键缩小扫描范围仍属于同一数据库资源,不能替代独立服务器
分库或分片单库写入、容量或租户规模超出边界可分散数据和写入压力事务、关联查询、路由、迁移和运维复杂度显著增加

共用一台服务器的边界

共用方案适合以下条件:

  • 业务规模较小或增长可预测;
  • 应用与数据库的 CPU、内存和存储峰值不重叠;
  • 暂时不需要独立扩容;
  • 可接受单机故障带来的共同影响;
  • 已经具备可恢复的备份方案。

参考配置可以从 4 个 vCPU、16 GB 内存和 100 至 300 GB 可持久化存储起步,但这只是用于规划的典型范围,不代表固定性能。若应用本身还需要大量缓存、编译、文件处理或后台任务,数据库可用资源应按实际情况下调。

独立数据库服务器的边界

当应用和数据库经常互相影响时,独立数据库服务器通常比继续堆加规格更容易管理。例如:

  • 应用发布或后台任务运行时,数据库延迟同步升高;
  • 日志处理、文件压缩或导出任务占用数据库存储 I/O;
  • 数据库 CPU 使用率升高后,应用接口也出现超时;
  • 数据库需要独立升级、备份和维护窗口;
  • 不同业务团队需要不同的访问权限和资源配额。

独立部署会增加网络链路,因此应用与数据库应尽量放在同一日本区域或同一私有网络中,并对网络延迟、带宽和访问控制进行验收。

只读副本的边界

只读副本适合:

  • 商品、文章、知识库等读取比例较高的业务;
  • 报表和导出可以接受短暂延迟;
  • 主库写入压力尚未达到必须分片的程度;
  • 需要在不影响主库的情况下执行部分查询。

它不适合直接解决以下问题:

  • 主库写入锁竞争;
  • 写入 WAL 过多;
  • 单表设计不合理;
  • 主库存储延迟过高;
  • 需要强一致读取但应用没有处理复制延迟。

如果订单刚提交后立即查询订单状态,应明确要求读取主库,或在应用层设计一致性判断,不能默认所有查询都路由到副本。

围绕日本本地访问、跨境业务和数据库资源拆分场景,A5数据提供日本物理服务器租用,覆盖Xeon Gold、AMD EPYC、NVMe、SSD及大容量HDD等配置,并提供CIA、GIA、CN2、SoftBank等线路选项。不同资源组合可用于部署PostgreSQL主库、应用服务、只读查询节点以及备份和归档系统,为事务处理、读多写少业务和数据增长较快的场景提供相应的计算、存储与网络基础。

什么时候适合在日本服务器上运行 PostgreSQL

适合的业务条件

日本服务器上的 PostgreSQL 通常适合以下组合:

  • 主要用户位于日本,或业务重点覆盖日本及东亚;
  • 应用服务器和数据库可以部署在同一地区;
  • 业务以结构化事务为主;
  • 数据库规模处于单库可管理范围;
  • 写入量稳定,峰值可以通过压测估算;
  • 业务需要事务、外键、复杂查询或较强的数据一致性;
  • 可以接受通过备份、主从或副本建设可用性,而不是要求多地同时写入;
  • 团队具备基础的 PostgreSQL 运维能力。

典型例子是面向日本市场的 SaaS 后端、预约和工单系统、电商业务库、企业门户、会员系统以及中等规模的内容管理平台。

需要谨慎评估的业务条件

以下场景并非绝对不能使用 PostgreSQL,但需要配套设计:

  • 同时承载在线交易和大规模分析;
  • 单表持续高速增长,且没有分区和归档策略;
  • 设备或日志数据以秒级甚至更高频率写入;
  • 业务有大量跨表报表和长时间导出;
  • 多个租户共享一个数据库,但租户之间负载差异很大;
  • 需要跨区域读写,且对一致性和延迟都有较高要求;
  • 数据库需要全年无明显维护窗口;
  • 备份、恢复和故障切换尚未经过演练。

对于多租户 SaaS,逻辑隔离不等于资源隔离。不同租户即使使用不同 schema,仍可能争抢同一数据库的 CPU、内存、连接和磁盘。如果某个租户的报表或批量任务经常影响其他租户,可以先限制查询和任务资源;若仍无法控制,再考虑将高负载租户迁移到独立数据库集群。

不宜直接采用单一 PostgreSQL 主库承载的场景

以下情况通常不适合把所有数据和工作负载直接压在一个 PostgreSQL 主库上:

  • 高频采集数据持续增长,原始数据保留周期很长;
  • 大量用户同时执行复杂分析,且在线事务不能受到影响;
  • 写入量峰值无法预测,存在明显突发流量;
  • 需要多个区域同时写入,并要求冲突自动解决;
  • 业务要求极短恢复时间,但当前只有单机和定期备份;
  • 数据中包含大量图片、视频、安装包或归档文件,数据库只需保存元数据;
  • 数据库容量、备份和恢复时间已经超过单台服务器可接受范围。

这类业务可以采用“在线交易库、采集系统、对象存储、分析库”分工的架构。PostgreSQL 仍可能是核心交易库,但不必承担所有数据形态和全部查询任务。

用指标判断是否需要拆分数据库资源

拆分不应由某一个瞬时指标触发,更适合观察一段时间内的趋势和业务影响。可以重点关注以下信号:

  • 数据库 CPU 在业务高峰长期处于较高水平,同时查询延迟持续升高;
  • 存储 I/O 利用率接近上限,读写延迟在高峰明显增加;
  • 应用和数据库共用服务器时,二者的资源峰值经常重叠;
  • 在线接口的 P95 或 P99 延迟被报表、备份或批处理明显拉高;
  • 活跃连接数、锁等待和长事务数量持续增加;
  • 主库 WAL 生成速度超过副本或备份链路的处理能力;
  • 数据库扩容必须同时扩容应用,但两者实际需求并不一致;
  • 某个租户、报表任务或采集任务对其他业务产生明显干扰;
  • 恢复测试显示 RTO 已超过业务允许范围;
  • 数据库维护、升级或备份需要与应用发布互相等待。

例如,8 个 vCPU、32 GB 内存和低延迟存储的数据库,在典型事务型业务中可能可以承载中等规模负载,但具体能力取决于 SQL、数据量、索引和并发方式。若 CPU 长期超过约 70%至80%,并且 P95 延迟、锁等待或 I/O 延迟同步恶化,应将其作为容量评估信号,而不是直接把这个百分比当成通用硬阈值。

在拆分前,先确认问题类型:

用指标判断是否需要拆分数据库资源配图

  • CPU 高:检查慢查询、执行计划、并发和聚合;
  • I/O 高:检查索引、全表扫描、WAL、检查点和存储规格;
  • 内存紧张:检查连接数、排序、缓存命中率和同机应用;
  • 锁等待高:检查事务范围、更新顺序和长事务;
  • 副本延迟高:检查主库写入量、网络、从库 I/O 和查询负载;
  • 容量增长快:检查索引膨胀、保留周期、归档和日志策略。

如果只是一个 SQL 导致负载异常,先优化 SQL 可能比拆分服务器更有效。如果多个独立负载长期互相影响,资源拆分才更有价值。

采购与验收时需要核对的事项

地域和网络

  • 主要用户、应用服务器、数据库和备份目标分别位于哪里;
  • 应用到数据库是否可以使用同区域或私有网络;
  • 是否存在跨区域调用和多次数据库往返;
  • 网络带宽、流量计费和峰值限制如何计算;
  • 跨区域备份或复制是否会影响业务链路;
  • 实际验收是否包含来自主要用户区域的访问测试。

计算和存储

  • vCPU 是独享、保证型还是共享型;
  • 内存是否为固定配置,是否存在突发限制;
  • 存储是本地盘还是网络盘;
  • 是否明确提供容量、IOPS、吞吐和延迟指标;
  • 扩容是否需要停机或迁移;
  • 快照是否影响数据库写入;
  • 主机故障后数据盘如何处理;
  • 是否有足够空间保存 WAL、临时文件、备份和恢复副本。

PostgreSQL能力

  • 支持的 PostgreSQL 大版本和小版本;
  • 是否可以使用业务所需扩展;
  • 是否支持连接池、流复制、逻辑复制或只读副本;
  • 是否可以调整必要参数;
  • 是否提供超级用户权限,若不提供,受限项有哪些;
  • 数据库升级、重启和维护由谁执行;
  • 是否能查看连接、锁、慢查询、复制延迟和存储指标。

不要只核对“支持 PostgreSQL”这一项。不同托管方式对扩展、备份、复制、参数调整和故障切换的限制可能不同,应把实际需要的能力逐项写入验收清单。

备份、恢复和可用性

  • 全量备份和增量备份的频率;
  • WAL 或时间点恢复是否可用;
  • 备份保留周期和保存位置;
  • 备份是否与主数据库共用同一故障域;
  • 恢复一份接近生产规模的数据需要多长时间;
  • 恢复后应用如何切换连接;
  • 是否有副本、备用实例或人工切换流程;
  • RPO 和 RTO 是否符合业务要求。

备份存在不等于可以恢复。至少应定期抽取备份进行恢复验证,确认表数量、关键业务记录、权限、扩展和应用连接都能正常工作。

性能验收

压测不应只发送简单的主键查询,而应使用接近实际业务的读写比例、数据量和并发方式。建议至少观察:

  • 事务成功率和错误率;
  • P50、P95、P99 延迟;
  • CPU、内存、磁盘 I/O 和网络流量;
  • 活跃连接、锁等待和长事务;
  • WAL 生成量和副本延迟;
  • 高峰期执行备份、VACUUM 或报表后的变化;
  • 数据库重启或故障切换后的恢复时间。

如果业务计划使用只读副本,还要单独验证复制延迟下的读取行为。如果业务计划进行分库或分片,则应额外验证跨库查询、事务边界、数据迁移和故障时的路由逻辑。

按条件选择落地路径

可以按以下路径形成初步判断:

  • 用户和应用主要在日本,业务以中小规模事务为主,读写峰值稳定:先选择同区域 PostgreSQL,优先保证应用与数据库网络路径短,并做好备份和恢复验证。
  • 应用与数据库在同一台服务器上互相抢资源:先拆成独立应用服务器和独立数据库服务器,再根据指标决定是否扩容。
  • 读请求或报表查询影响在线事务:先优化 SQL,再考虑只读副本;报表规模继续增长时,将分析任务迁移到独立系统。
  • 数据库容量增长快但写入模式清晰:先规划分区、归档和存储扩容;单纯增加磁盘不能解决查询和维护成本问题。
  • 单个租户、采集任务或批处理形成明显噪声:先做连接、任务和查询隔离,必要时迁移到独立数据库资源。
  • 写入量、数据量或跨区域需求已超过单库边界:再评估分库、分片或独立数据处理链路,不要在业务高峰期临时改造。
  • 业务要求较短的恢复时间:优先补齐副本、备份、恢复演练和切换流程,而不是只增加主库规格。

最终选型应同时满足三项条件:数据库负载与服务器规格匹配,应用与数据库的地域和网络路径合理,备份恢复及后续拆分路径能够被验证。只要这三项中有一项尚未确认,就不宜仅凭服务器所在地或单一配置参数决定 PostgreSQL 是否适合该业务。

本文由A5数据原创发布,转载请注明出处:https://www.a5idc.com/helpcontent/4504.html

相关推荐