香港服务器上的Apache性能瓶颈,怎样从连接数与上游响应定位

发布人:A5数据发布时间:2026-10-30 14:50阅读量:77

单看香港服务器上的 Apache 连接数,很容易把网络访问量、KeepAlive 空闲连接、HTTP/2 多路复用和真正正在处理的请求混为一谈。连接数上升并不等于 Apache 已经到达性能上限;只有当活跃请求、Apache 工作进程或线程、上游响应时间、队列和错误率在同一时间窗口内发生联动,才能判断瓶颈位于 Apache、应用、数据库,还是服务器本身的 CPU、内存、磁盘和网络。

比较有代表性的判断方式是:连接数持续增加,同时 BusyWorkers 接近 MaxRequestWorkers,上游响应时间从数百毫秒升到数秒,504 或应用超时增加,而 CPU 和磁盘并未明显饱和,这通常更接近应用或数据库变慢。若上游响应保持稳定,但 CPU 长时间接近满载,Apache 请求处理、TLS、压缩或静态文件传输可能成为主要限制。下面按照同一观察窗口中的多指标变化,建立一套可复测的定位方法。

先把“连接数”拆开看

Apache 场景中至少有四类容易被统称为“连接数”的指标:

指标代表含义不能直接说明的问题
TCP Established已建立的客户端 TCP 连接,包括KeepAlive空闲连接不能直接代表正在执行的请求数量
Apache BusyWorkers正在处理请求的进程或线程更接近 Apache 当前并发处理压力
Apache IdleWorkers可以立即接收请求的空闲处理单元需要结合 MPM 类型和上限观察
监听套接字 Recv-Q等待应用接受的连接或数据只能说明接收队列出现积压,不能直接证明 CPU 已满
上游连接或队列等待 PHP-FPM、应用服务、接口服务处理的请求需要结合上游响应时间和错误率判断

如果启用了较长的 KeepAliveTimeout,客户端可能保持大量空闲 TCP 连接,但 Apache 并没有为每条连接持续消耗一个完整的请求处理单元。使用 event MPM 时,这种差异尤其明显。

HTTP/2 还会进一步降低“连接数”的判断价值。一条 TCP 连接可能同时承载多个请求,因此连接数没有明显增加,并不代表请求并发量没有增长。相反,多个短连接也可能来自客户端网络波动、TLS重复握手或健康检查,而不一定是业务请求激增。

可以用并发估算关系辅助理解:

正在处理的请求数 ≈ 每秒请求数 × 平均响应时间(秒)

例如,每秒处理 180 个请求,平均响应时间为 2.5 秒,估算中的并发处理量约为:

180 × 2.5 = 450 个请求

这不是 TCP 连接数,也不是 Apache 配置中的所有连接上限。它只用于判断响应时间变长后,工作进程或线程为何可能迅速被占满。

建立同一时间窗口

性能定位不应只执行一次 top,也不应拿某一时刻的连接数和另一时刻的 CPU 使用率进行比较。建议选择一段包含正常状态、异常高峰和恢复阶段的观察窗口,例如连续记录 15 至 30 分钟,并尽量使用 10 秒或 1 分钟粒度。

至少应同步保留以下指标:

  • Apache:请求速率、响应时间 P50/P95/P99、状态码、BusyWorkers、IdleWorkers。
  • 连接:Established 数量、监听队列、KeepAlive 请求数量、上游连接和队列。
  • 系统:CPU 用户态、内核态、iowait、load、内存可用量、Swap 换入换出。
  • 磁盘:读写延迟、队列长度、利用率、日志或数据库所在设备的 I/O。
  • 网络:吞吐、丢包、重传、监听溢出、网卡错误。
  • 应用和数据库:接口处理时间、线程或进程池队列、慢查询、锁等待、连接池使用率。

Linux 上可以先采集基础信息。不同发行版的 Apache 管理命令可能是 apachectl 或 apache2ctl,应先确认实际命令:

command -v apachectl
command -v apache2ctl

apachectl -V 2>/dev/null | grep -E 'SERVER_MPM|HTTPD_ROOT|SERVER_CONFIG_FILE'
apachectl -M 2>/dev/null | grep -E 'mpm_|status_module|proxy_module|http2_module'

ss -s
ss -lnt '( sport = :80 or sport = :443 )'
ss -Htan state established '( sport = :80 or sport = :443 )' | wc -l

若系统使用 apache2ctl,将后续的 apachectl 替换为实际命令即可。ss -lnt 输出中的 Recv-Q 需要结合监听端口观察;Established 数量则要结合 Apache 当前活跃工作单元判断,不能单独下结论。

系统指标可以采用短时采样:

vmstat 1 10
mpstat -P ALL 1 10
iostat -xz 1 10
sar -n DEV 1 10

这些命令通常由 procps、sysstat 等软件包提供。如果系统未安装,应先确认软件来源和变更影响,不要在业务高峰期临时安装大量监控组件。

用连接数和上游响应建立第一轮判断

假设某段监控数据如下。数据仅用于说明分析方法,不代表某台实际香港服务器的监控结果。

指标正常阶段异常阶段变化
Established TCP连接1801,200明显增加
Apache BusyWorkers70/400395/400接近上限
Apache响应P95230 ms2,350 ms明显变慢
上游响应P95180 ms2,100 ms与整体响应同步变慢
CPU使用率45%52%未明显饱和
iowait3%4%变化很小
监听Recv-Q00未见监听队列积压
5xx比例0.2%4.8%明显增加

这组数据中,连接数和 BusyWorkers 同时上升,但 CPU、iowait 和监听队列没有同步达到高位;与此同时,上游响应时间几乎占据了整体响应时间的大部分。更合理的第一判断是:应用服务、PHP-FPM、内部接口或数据库响应变慢,Apache 只是持续占用工作单元等待结果。

此时不能简单地把 MaxRequestWorkers 调大。若上游每个请求都要等待 2 秒,增加 Apache 工作单元可能只是让更多请求同时等待,甚至把数据库连接池、应用内存或 PHP-FPM 进程进一步压满。

可以按以下六个环节推进判断:

  1. 建立观察窗口:记录异常前、异常中和恢复后的相同指标。
  2. 确认指标A变化:先确认连接数、请求速率或 Apache BusyWorkers 是否真的增加,而不是只看平均响应时间。
  3. 观察指标B联动:将上游响应、CPU、内存、I/O、网络和错误率放在同一时间轴。
  4. 排除替代解释:检查KeepAlive、HTTP/2、健康检查、客户端网络和监控探针是否造成连接数假增长。
  5. 形成初步判断:确定是 Apache处理能力、上游等待、系统资源还是网络路径优先。
  6. 复测:在相同请求类型和相近流量下再次观察,确认指标是否按预期变化。

不同指标组合分别指向什么

连接数增加,Apache工作单元接近上限,上游响应也变慢

这种组合更像“请求被上游拖住”,常见对象包括:

  • PHP-FPM 子进程数量不足;
  • Java、Node.js、Python 等应用线程池或进程池排队;
  • 数据库连接池耗尽;
  • 数据库锁等待、慢查询或磁盘延迟上升;
  • 应用调用外部接口的超时时间过长。

Apache 本身的响应时间会随着等待时间增加,但这并不意味着 Apache 是根因。需要继续看上游服务的活动进程、队列长度、请求耗时和错误日志。

如果 Apache 反向代理的是 HTTP 应用,可以通过请求ID把 Apache 访问日志和应用日志关联起来。应用侧应记录请求进入时间、业务处理时间、数据库耗时和外部调用耗时。对于 PHP-FPM,还应观察活动进程、空闲进程、监听队列和慢请求,而不是只看 Apache 的 502 或 504。

数据库瓶颈不能仅凭服务器 CPU 判断。数据库所在主机 CPU 不高,也可能存在锁等待、连接池等待或存储设备延迟。应同时核对活动连接数、等待事件、慢查询和事务锁;如果应用日志显示“等待数据库连接”的时间增加,而数据库查询本身并未变慢,问题更可能在连接池容量或连接释放异常。

Apache工作单元接近上限,但上游响应稳定,CPU长期高位

例如:

指标正常阶段异常阶段
BusyWorkers90/400380/400
上游P95140 ms160 ms
CPU使用率55%94%
iowait2%3%
TLS握手量低明显增加
响应P95220 ms1,800 ms

这时应优先检查 Apache 所在主机的 CPU 消耗来源,而不是继续追踪数据库。可能原因包括:

  • TLS 握手频繁,KeepAlive未生效;
  • gzip、Brotli或动态压缩消耗大量 CPU;
  • 大量静态文件由 Apache直接传输;
  • PHP、CGI或代理处理在本机占用 CPU;
  • 日志格式过于复杂或日志输出量突然增加;
  • MPM 与当前请求类型不匹配。

Apache 使用的 MPM 类型会影响连接和工作单元的关系。可以先核对:

apachectl -V | grep SERVER_MPM
apachectl -M | grep mpm

prefork 通常以进程为主要处理单元,单个进程的内存占用更值得关注;worker 和 event 通常使用线程,KeepAlive连接和实际忙线程的关系不同。不能把一种 MPM 下的 MaxRequestWorkers 经验值直接套用到另一种 MPM。

如果异常集中在 HTTPS 新建连接,建议同时比较 TLS 握手数、连接复用率和 CPU 内核态占比。若只是某类大文件或压缩资源变慢,则应按 URI、响应大小和压缩状态拆分,而不是把所有 Apache 请求归为同一类。

连接数增加,但BusyWorkers不高,上游响应也稳定

这类现象经常被误判为 Apache 过载。可能的解释包括:

  • KeepAlive超时较长,客户端保留了大量空闲连接;
  • HTTP/2连接复用,连接数量与请求数量不成比例;
  • 健康检查、爬虫或长轮询占用了连接;
  • 监控探针和真实用户使用了不同的访问模式;
  • 请求在客户端到香港机房之间的网络路径上等待,尚未形成服务器处理压力。

此时需要查看连接状态、每条连接承载的请求数量和 Apache 的空闲工作单元。server-status 可以提供比单纯 ss 更接近 Apache 内部状态的信息,但不应直接暴露到公网。

Apache 2.4 的受限示例可以是:

<Location "/server-status">
    SetHandler server-status
    Require local
</Location>

修改配置前应备份原文件,确认只作用于目标虚拟主机或管理范围,并使用配置检查:

apachectl configtest

如需让远程监控读取,应将 Require local 改为明确的监控来源地址,并通过管理网络、访问控制和日志审计限制范围。出现问题时,恢复备份配置并再次执行 configtest,再按发行版使用对应的服务重载方式。

连接数、监听队列和重传同时增加,但上游响应正常

如果 Apache 内部处理时间正常、上游也正常,但客户端总耗时明显上升,应检查网络路径。香港服务器面向不同地区访问时,网络时延、跨运营商路径、丢包和重传都可能影响用户体验。这个问题不能仅凭服务器网卡吞吐是否达到带宽上限来判断。

建议拆分一次请求的时间:

curl -sS -o /dev/null \
  -w 'dns:%{time_namelookup}s connect:%{time_connect}s tls:%{time_appconnect}s ttfb:%{time_starttransfer}s total:%{time_total}s code:%{http_code}\n' \
  https://example.com/

其中:

  • time_namelookup 反映DNS解析阶段;
  • time_connect 反映TCP连接建立;
  • time_appconnect 反映TLS握手完成;
  • time_starttransfer 反映收到首字节前的等待;
  • time_total 是客户端整体耗时。

如果服务器访问日志中的处理时间稳定,但不同地区探针的连接建立或首字节时间明显不同,应优先排查网络路径、DNS、TLS握手和丢包。若监听 Recv-Q、TCP 重传和 ListenDrops 同时增加,才更接近接收队列或网络接入层压力。

需要注意,Apache 的访问日志耗时与浏览器看到的完整页面加载时间不是同一概念。浏览器还可能等待多个资源、执行脚本、建立额外连接,因此不能拿页面总加载时间直接证明 Apache 处理变慢。

内存紧张、Swap活动增加,响应时间逐步恶化

内存瓶颈通常不是瞬间把 CPU 打满,而是先表现为延迟抖动、进程创建变慢、I/O 增加和错误率上升。应重点看:

  • MemAvailable 是否持续下降;
  • vmstat 中 si、so 是否持续有数据;
  • Apache、PHP-FPM和应用进程的 RSS 是否同步增长;
  • OOM 日志或进程被系统终止记录;
  • 连接数增加时,每个并发请求的内存占用是否导致进程无法继续扩容。

Swap 已使用并不自动等于故障;长期未访问的内存页可能被换出。更有判断价值的是异常窗口内持续发生的换入换出,以及它是否与响应时间、iowait和错误率同步变化。

如果只增加 Apache 工作进程数,却没有估算单进程或单线程的内存成本,可能让可用内存更快耗尽。调整 MaxRequestWorkers、PHP-FPM pm.max_children 或应用线程池前,应先计算并发处理单元的内存上限,并保留可回滚的原配置。

磁盘延迟和iowait增加,应用与Apache一起变慢

磁盘瓶颈可能来自数据库、应用日志、Apache访问日志、临时文件或静态文件读取。重点不是只看磁盘 %util 是否达到某个固定阈值,而是看设备延迟、队列长度和业务响应是否同步变化。

典型联动是:

  • iostat -xz 中 await 和队列长度上升;
  • vmstat 中 wa 增加;
  • 应用数据库查询时间或日志写入时间增加;
  • Apache 上游响应P95随后变长;
  • CPU 使用率反而不高。

如果只有 Apache 静态文件请求变慢,而应用接口正常,应检查静态文件所在设备和文件缓存;如果动态接口和数据库同时变慢,则数据库或共享存储更值得优先检查。日志量突然增长也可能让日志盘成为瓶颈,尤其是在高并发错误循环中。

从Apache日志和状态页验证假设

使用访问日志获得请求耗时

Apache 的 %D 通常以微秒记录请求处理耗时,可以为目标虚拟主机配置简化的性能日志:

LogFormat "%t %a \"%r\" %>s %D %B %k" perf
CustomLog logs/access_perf.log perf

字段含义依次包括时间、客户端地址、请求行、最终状态码、请求耗时、响应字节数和当前连接上的KeepAlive请求序号。

这个耗时适合与服务器端资源和应用日志对齐,但不能单独分离“Apache排队时间”和“上游处理时间”。如果需要区分,应让应用记录请求ID和各阶段耗时,或者启用应用自身的请求计时、PHP-FPM慢日志和数据库慢查询日志。

记录日志时应注意隐私和容量问题,不要把完整查询参数、认证信息或敏感请求头无条件写入日志。性能排查结束后,也应评估新增日志对磁盘和日志采集系统的影响。

查看Apache当前工作状态

如果已经受限启用了 mod_status,可以在服务器本机读取状态页:

curl -sS http://127.0.0.1/server-status?auto

重点关注:

  • BusyWorkers 或对应的忙工作单元;
  • IdleWorkers;
  • 当前处理请求的URI和持续时间;
  • KeepAlive连接情况;
  • 请求总量和工作单元上限。

如果 BusyWorkers 只是短暂升高后迅速恢复,可能是正常流量尖峰;如果它持续接近上限,并且响应P95、上游队列或错误率同步升高,才更接近容量瓶颈。状态页的单次结果只能作为现场快照,最好由监控系统定时采集并与系统指标对齐。

区分 Apache 排队与上游排队

Apache 反向代理请求可能经历多个阶段:

从Apache日志和状态页验证假设|区分 Apache 排队与上游排队配图

  1. 客户端连接和请求读取;
  2. Apache分配工作进程或线程;
  3. 连接上游服务;
  4. 上游服务排队;
  5. 应用执行业务和数据库操作;
  6. Apache读取并发送响应。

仅凭 Apache 访问日志,通常无法精确知道第 3 至第 5 阶段分别用了多少时间。因此,看到 Apache 请求持续 3 秒时,不能直接说“Apache处理了3秒”。应通过请求ID、应用日志、PHP-FPM状态、数据库慢查询和上游服务指标进行拆分。

如果 Apache 返回 502 或 504,同时上游队列、应用处理时间和数据库等待增加,优先处理上游容量或慢请求;如果 Apache 返回错误时上游完全没有收到请求,则需要检查代理连接、DNS、端口监听、TLS或Apache自身资源。

复测时不要只做一次压力请求

形成初步判断后,应在流量、请求类型和探针位置相近的条件下复测。复测目标不是单纯追求更低的某个指标,而是确认因果关系是否成立:

  • 降低上游查询耗时后,Apache BusyWorkers和整体P95是否同步下降;
  • 增加缓存命中后,CPU和上游队列是否下降;
  • 减少TLS新建连接后,CPU内核态和连接建立耗时是否改善;
  • 解决磁盘延迟后,iowait、应用耗时和5xx是否恢复;
  • 内存压力缓解后,Swap活动和延迟抖动是否减少。

对 MaxRequestWorkers、KeepAlive、压缩、日志格式或PHP-FPM进程数进行调整时,应先保存原配置,记录变更范围和预期指标,使用 apachectl configtest 检查语法,并安排可观察的变更窗口。若新配置导致内存、错误率或队列恶化,应恢复原配置并重新加载服务,不要连续叠加多个未经验证的参数变化。

下一次排查应同时保留的指标组合

初步怀疑方向必须同时观察的指标更有价值的验证信号
Apache工作单元不足BusyWorkers、IdleWorkers、MaxRequestWorkers、请求速率、响应P95工作单元长期接近上限,且上游响应正常或Apache自身CPU升高
应用或PHP-FPM变慢Apache耗时、上游P95、应用队列、活动进程、502/504上游耗时和队列先变化,Apache随后被占满
数据库瓶颈应用数据库耗时、连接池、数据库活动连接、锁等待、慢查询应用等待时间与数据库等待事件同步增加
CPU瓶颈用户态、内核态、单核利用率、TLS/压缩量、Apache进程CPU上游稳定但CPU持续高位,响应时间与CPU联动
内存瓶颈MemAvailable、RSS、Swap in/out、OOM记录、延迟Swap活动或回收压力与延迟、错误率同步上升
磁盘瓶颈await、队列长度、iowait、日志量、数据库I/O磁盘延迟先升高,应用和Apache响应随后变慢
网络或接入队列Recv-Q、TCP重传、ListenDrops、连接建立时间、区域探针服务器处理时间正常,但连接建立或网络传输阶段变慢

对于香港服务器上的 Apache,连接数适合用来发现压力变化,但不适合单独作为瓶颈结论。下一次出现延迟升高时,至少应把“TCP连接数、Apache BusyWorkers、上游P95、CPU与iowait、内存Swap、监听队列、5xx比例”放在同一时间轴中,再结合请求类型和探针区域复测。这样才能区分 Apache 资源耗尽、上游服务等待、数据库阻塞、主机资源紧张和网络路径异常。

面向香港地区部署网站、业务后台或数据库服务,A5idc数据提供多种物理服务器配置,涵盖Xeon Gold与AMD EPYC平台,并配有SSD或NVMe存储及不同内存规格。结合CN2与国际带宽线路选项,可为Apache及上游应用的运行、数据读写和多任务处理提供相应的计算与网络资源基础。

本文由A5数据原创发布,转载请注明出处:https://www.a5idc.com/helpcontent/6638.html

相关推荐