日本服务器接入CDN后缓存未命中,如何区分规则与回源问题

发布人:A5数据发布时间:2026-10-22 17:09阅读量:92

日本服务器接入 CDN 后,页面反复出现 MISS,并不能直接说明日本源站回源失败。应先固定同一个 URL、请求方法、查询参数、Cookie 和测试边缘,观察 Age、CDN 缓存状态头、HTTP 状态码、响应时间,再与源站访问日志按时间或请求 ID 对齐:如果响应带有 private、no-store、Set-Cookie,或每次请求的缓存键不同,优先检查缓存规则;如果对象本身可缓存,但 MISS 时出现源站超时、连接失败、TLS 异常或 5xx,才应把重点放到回源链路和源站服务。

区分两类问题的关键,是不要把 MISS 当成单一故障状态。MISS 只表示本次边缘节点没有直接拿到可用对象,可能是首次填充、TTL 到期、缓存被清理、查询参数变化、重新验证,或者回源失败。规则问题通常在同一个 URL、多次请求甚至多个边缘节点上稳定复现;回源问题则更容易表现为时间性、区域性或状态码波动,并且能在 CDN 回源日志、负载均衡日志或日本服务器日志中找到对应异常。

先确认缓存未命中的真实表现

区分 HIT、MISS、BYPASS 与重新验证

不同 CDN 使用的响应头名称并不完全一致,常见字段包括 Age、X-Cache、CDN-Cache-Status、Via 等。判断时不要只看一个字段,应结合状态码、响应头和源站日志。

观察结果通常代表的含义首要检查方向
HIT,Age 持续增加边缘节点直接提供缓存对象缓存工作正常,继续检查内容新鲜度
MISS,随后源站出现一次请求边缘没有对象,正在回源填充检查对象是否成功存储,以及下一次是否变为 HIT
BYPASS 或 PASS规则明确要求不使用缓存,或请求不满足缓存条件检查 Cookie、鉴权、查询参数和缓存规则
EXPIRED、STALE 或类似状态对象过期,边缘需要重新获取或验证检查 TTL、源站响应和重新验证策略
REVALIDATED、304边缘可能保留了对象,但仍向源站确认内容未变化这不是完全脱离源站的命中,需关注回源请求量
MISS 后返回 502、504 或连接错误回源过程中出现异常检查网络、TLS、端口、访问控制和源站服务
每次都是 MISS,但源站没有对应请求可能是状态头含义不同、请求被边缘策略拦截,或观察的不是实际回源链路对照 CDN 日志和实际匹配的规则

Age 缺失也不能单独证明没有缓存。有些 CDN 不返回该字段,有些对象在重新验证后会重置显示方式。相同请求应至少连续观察两到三次,并记录完整响应头。

建议使用 GET 请求进行测试,因为部分 CDN 对 HEAD 和 GET 的缓存处理不同。下面的命令只用于采集示例响应,不代表已经在某个实际环境执行:

url='https://www.example.jp/assets/app.css'

for i in 1 2 3; do
  date -u
  curl -sS -D - -o /dev/null \
    --connect-timeout 5 \
    --max-time 15 \
    "$url" |
    grep -Ei '^(HTTP/|age:|cache-control:|etag:|last-modified:|set-cookie:|vary:|x-cache:|cdn-cache-status:|via:)'
  sleep 2
done

测试时不要随意给 URL 增加随机查询参数。随机参数本身可能改变缓存键,使每次请求都成为一个新对象,反而制造持续 MISS。

先判断影响范围

缓存问题的范围通常比单个响应头更有判断价值。

现象范围更接近的原因
所有 HTML 页面都 BYPASS 或 MISS全局缓存规则、响应头策略、登录态或 Cookie 处理
只有某个目录或文件类型未命中路径规则、对象 TTL、文件后缀或状态码策略
同一路径只有带查询参数时未命中查询参数被纳入缓存键,或查询参数规则未配置
日本用户命中,海外用户未命中边缘节点不同、对象尚未在其他节点填充,或区域规则不同
只有某个 POP 反复未命中节点缓存状态、边缘配置发布、节点到源站的网络问题
首次请求 MISS,第二次变 HIT通常是正常的缓存填充过程
长时间重复 MISS 且源站请求量同步上升对象没有被存储、缓存键不断变化、TTL 为零,或响应不符合缓存条件

日本服务器只决定了回源位置,并不决定 CDN 是否命中。日本边缘节点回源到日本服务器时,路径可能较短;海外边缘节点未命中时,则仍要跨区域访问日本源站。如果命中率低,海外用户更容易感受到回源延迟,但这不等于日本服务器本身发生故障。

建立原因树:把 MISS 分成五类

可以按照“边缘规则与缓存键—缓存对象—网络—系统与服务—应用响应”的顺序建立原因树:

建立原因树:把 MISS 分成五类配图

  1. 请求没有进入可缓存分支:路径、主机名、方法、Cookie、鉴权或查询参数触发了绕过规则。
  2. 请求进入缓存分支,但对象没有有效存储:TTL 为零、对象过期、清理后尚未重新填充,或响应状态不允许缓存。
  3. 对象需要回源,但 CDN 到日本服务器的链路异常:DNS、IP 版本、端口、TLS、访问控制或连接超时。
  4. 日本服务器能够接收请求,但系统或服务处理不稳定:CPU、内存、磁盘、连接数、Web 服务、应用进程或数据库出现瓶颈。
  5. 源站返回内容不适合共享缓存:带会话 Cookie、用户特有内容、动态鉴权结果,或者不同请求实际需要不同响应。

前两类更偏向缓存规则和对象管理,后三类才属于典型的回源问题。实际故障可能同时存在,例如错误的缓存规则导致回源量增加,回源量又压垮日本服务器,最终表现为 CDN MISS 和源站 504 同时出现。

逐层排除缓存规则与回源问题

第一层:确认缓存键是否一致

CDN 不只根据 URL 路径判断是否命中,还可能把以下因素纳入缓存键:

  • 协议和主机名,例如 http 与 https、不同的子域名;
  • 路径大小写、末尾斜杠、URL 编码方式;
  • 查询参数的全部或部分;
  • Host、Accept-Encoding、语言、设备类型等请求头;
  • Cookie、授权信息或自定义请求头;
  • GET、HEAD 等请求方法;
  • CDN 规则指定的区域、设备或版本标签。

例如下面三个地址看起来接近,但可能对应三个不同对象:

https://www.example.jp/product.html
https://www.example.jp/product.html?utm_source=search
https://www.example.jp/product.html?lang=ja

如果 CDN 默认把全部查询参数纳入缓存键,utm_source 的每个取值都会产生独立对象。对于统计参数,可以在确认不同参数不会改变页面内容后,将其从缓存键中排除;对于 lang、currency、device 等真正影响内容的参数,则应保留,不能为了提高命中率而全部忽略。

同样,不能只看浏览器地址栏。浏览器可能自动发送 Cookie、Accept-Language 或鉴权头,命令行测试却没有这些请求头,二者命中的规则可能不同。

第二层:检查页面、对象、查询和边缘策略的层级

不同内容应使用不同的缓存层级,不能把所有资源都套用同一条“缓存时间越长越好”的规则。

缓存层级适合的内容关键判断常用失效方式
页面级缓存匿名访问的 HTML、公开产品页、文档页页面是否包含用户身份、购物车、权限和实时数据按 URL 精确失效,或按页面标签失效
对象级缓存CSS、JavaScript、图片、字体、安装包文件是否使用版本号或内容指纹,是否允许长时间复用发布新版本后更换文件名,必要时精确清理旧对象
查询参数级缓存查询参数确实改变内容的接口或页面哪些参数影响结果,哪些只是统计标记只保留影响内容的参数,避免无关参数扩大缓存键
边缘策略级缓存TTL、过期、重新验证、错误响应缓存缓存持续时间、源站更新方式和回源承载能力调整规则后按路径或对象清理,避免全站清理

页面级缓存适合公开、无个性化内容的 HTML。只要页面包含登录用户名、权限信息、购物车或订单数据,就不应直接作为公共对象缓存,除非应用已经把这些动态部分拆出。

对象级缓存通常比整页缓存更容易控制。带内容指纹的文件,例如 app.8f31c.js,发布后文件名变化,旧对象自然不会覆盖新版本。此时可以使用较长 TTL,减少频繁清理的需要。

查询参数规则必须谨慎。把所有参数从缓存键中删除,可能让不同语言、不同币种或不同用户看到错误内容;把所有参数都保留,则容易造成缓存对象碎片化。正确做法是逐项确认参数是否改变响应内容。

第三层:核对响应头和 CDN 缓存条件

源站返回的响应头常常是规则判断的直接依据。常见影响因素如下:

  • Cache-Control: private:通常表示不应被共享缓存使用。
  • Cache-Control: no-store:通常表示不应存储响应。
  • Cache-Control: no-cache:不是“绝对不缓存”,通常表示使用前需要重新验证,实际行为取决于 CDN 配置。
  • s-maxage:专门影响共享缓存的有效时间,可能与浏览器的 max-age 不同。
  • Set-Cookie:很多 CDN 会因其存在而绕过缓存,尤其是登录和会话场景。
  • Vary:指定响应会随请求头变化。Vary: * 通常会显著限制共享缓存。
  • ETag、Last-Modified:支持条件请求,但可能导致频繁 REVALIDATED,而不是完全 HIT。
  • 响应状态码:200、301、404、500 等是否缓存,通常由 CDN 的状态码规则分别决定。
  • 响应体大小和内容类型:部分平台对过大对象、流式响应或特定类型有单独限制。

可以用下面的策略作为判断示例,但不应直接复制到所有业务:

# 适合内容指纹文件,只有在文件名变化后内容才会变化
Cache-Control: public, max-age=31536000, immutable

# 适合匿名 HTML,要求 CDN 短时间共享缓存,浏览器每次确认
Cache-Control: public, s-maxage=60, max-age=0, must-revalidate

# 适合包含用户身份或敏感数据的响应
Cache-Control: private, no-store

如果 CDN 控制台显示“规则允许缓存”,但源站仍返回 private、no-store 或 Set-Cookie,应确认平台是否允许规则覆盖源站头。不要只修改 CDN 的 TTL 就认为对象一定会被存储。

还要检查规则优先级。一个目录规则可能允许缓存,但更靠前的全局规则又因 Cookie 或请求头将请求设置为 BYPASS。应查看实际命中的规则编号、动作和缓存键,而不是只查看规则列表中的某一条。

第四层:检查 CDN 到日本服务器的网络回源

当请求确实需要回源时,重点转向 CDN 到日本服务器之间的路径。常见检查项包括:

第四层:检查 CDN 到日本服务器的网络回源配图

  1. CDN 配置的源站域名是否解析到正确地址。
  2. 源站是否同时存在 IPv4 和 IPv6,且其中一条路径不可用。
  3. 80 或 443 端口是否开放给 CDN 的回源地址段。
  4. TLS 证书、SNI、证书链和源站主机名是否匹配。
  5. 防火墙或安全组是否只允许旧的 CDN 出口地址。
  6. CDN 到源站的连接超时、读取超时和重试次数是否合适。
  7. 源站 DNS 是否发生短暂解析失败或返回了失效地址。

可以先查看解析结果,但解析结果本身不能证明 CDN 实际使用了哪条回源路径:

dig +short www.example.jp
dig +short origin.example.jp

在已获得授权、且源站允许测试的位置,可以用 --resolve 将测试域名指向指定源站地址,比较源站的状态码、响应头和响应时间。下面的地址是文档中的保留示例,不代表实际源站地址:

curl -sS -D /tmp/origin.headers \
  -o /tmp/origin.body \
  --connect-timeout 5 \
  --max-time 15 \
  --resolve www.example.jp:443:203.0.113.10 \
  https://www.example.jp/assets/app.css

这个测试应当与 CDN 回源条件区分开。测试机本地可以访问源站,并不代表 CDN 的出口地址也能访问;反过来,本地被源站防火墙拒绝,也不能直接证明 CDN 回源失败。更有价值的是查看 CDN 的回源日志、源站前置负载均衡日志和 Web 服务日志是否形成对应记录。

A5数据提供日本物理服务器租用,涵盖Xeon Gold、AMD EPYC、NVMe存储及CTG系列,可作为网站、接口、数据库和CDN源站的本地资源基础。针对日本本地访问、跨境业务及不同回源路径,产品提供CIA、GIA、CN2、SoftBank等线路选择,并覆盖SSD、大容量HDD和多IP配置,便于结合业务流量、数据规模与网络需求构建源站环境。

第五层:检查日本服务器的系统和服务

如果 CDN 日志显示已经发起回源,而日本服务器返回 5xx、超时或连接被关闭,应继续向系统和服务层深入。

在使用 systemd 管理、且 Web 服务名称确实为 nginx 的 Linux 环境中,以下命令可用于只读检查:

uptime
free -h
df -h
ss -s
journalctl -u nginx --since "30 minutes ago" --no-pager

重点观察:

  • CPU 是否长期处于高利用率,导致请求排队;
  • 内存是否不足,是否发生交换或进程被系统终止;
  • 磁盘空间和 inode 是否耗尽;
  • Web 服务工作进程、连接数和文件描述符是否接近上限;
  • PHP-FPM、Java、Node.js 或其他应用进程是否出现队列堆积;
  • 数据库连接池、慢查询和锁等待是否拖慢页面生成;
  • 源站响应头已经生成,但响应体传输被中途关闭的情况。

服务名称、日志路径和进程模型会因发行版与部署方式而变化。若不确定,不应直接套用 nginx 或某个服务名,应先通过进程管理器、部署文档或 systemctl list-units 确认。

一个典型的模拟日志关联关系如下:

# CDN 回源日志(示例)
request_id=abc123 pop=Tokyo cache=MISS origin_status=504
origin_connect_ms=5000 origin_ttfb_ms=0

# 日本服务器 Web 日志(示例)
2025-01-01T10:20:15Z request_id=abc123 status=499 request_time=5.01

这里可以推断连接或读取过程超过了约 5 秒,但还不能仅凭日志断定是网络、Web 服务还是上游应用。还需要查看同一时间段的系统负载和应用日志。

第六层:检查应用是否主动阻止共享缓存

应用层是“CDN 配置允许缓存,但实际仍然未命中”的常见来源。

重点核对以下场景:

  • 未登录页面与登录页面共用同一路径,但应用统一设置了会话 Cookie;
  • 页面包含用户昵称、购物车数量、权限按钮等个性化内容;
  • 接口使用 Authorization,或根据 Cookie 返回不同数据;
  • 应用根据语言、设备、地区或 AB 实验分组返回不同内容;
  • 统计参数被纳入缓存键,造成大量低频对象;
  • 302 跳转、404 或错误响应没有配置合理的缓存策略;
  • 应用每次都生成不同的 ETag,导致对象无法有效复用;
  • 使用 Range 请求或流式响应,触发 CDN 的特殊处理。

如果页面确实是个性化的,正确处理方式通常不是强行提高缓存命中率,而是拆分公共页面和动态接口。公共 CSS、JavaScript、图片可以缓存,用户信息和实时数据则通过请求接口或页面局部渲染获取。

用证据定位是规则问题还是回源问题

不要根据单次 MISS 下结论,可以使用下面的组合判断:

用证据定位是规则问题还是回源问题配图

观察到的组合更可能的根因下一步
同一 URL 始终 BYPASS,响应含 private 或 no-store源站响应头或 CDN 绕过规则查看规则匹配、Cookie 和应用缓存意图
首次 MISS,第二次变为 HIT正常回源填充检查对象 TTL 和发布后的失效方式
每次 MISS,每次都有不同查询参数缓存键被查询参数拆散区分统计参数与内容参数
每次 MISS,源站都返回 Set-Cookie应用会话或 CDN 对 Cookie 的处理导致不存储确认页面是否能安全共享缓存
MISS 时 CDN 报 502/504,源站日志没有请求CDN 到源站前的 DNS、网络、TLS 或访问控制问题对照 CDN 回源日志、源站防火墙和解析记录
MISS 时源站有请求,但源站耗时明显升高回源已到达,问题偏向系统、服务或应用查看 CPU、连接池、数据库和上游耗时
源站稳定返回 200,但对象仍不存储响应头、状态码、对象大小或规则限制检查实际响应头和缓存存储条件
状态为 REVALIDATED,源站大量收到 304TTL 较短或重新验证频繁调整共享缓存时间和验证策略
只有某个边缘节点未命中,其他节点正常节点缓存状态或节点到日本源站的路径差异查看 POP 级别缓存与回源指标

例如,下面是一组模拟现象:

第一次请求:
HTTP/2 200
X-Cache: MISS
Cache-Control: private, no-store
Set-Cookie: session_id=...
Origin-Status: 200

第二次请求:
HTTP/2 200
X-Cache: MISS
Cache-Control: private, no-store
Set-Cookie: session_id=...
Origin-Status: 200

这种结果更像是应用或缓存规则主动禁止共享缓存,而不是日本服务器无法回源。因为源站已经返回 200,真正的问题是响应没有成为可复用对象。

另一组模拟结果如下:

第一次请求:
HTTP/2 504
X-Cache: MISS
Origin-Connect-Time: 5000
Origin-Status: timeout

同时,源站前置防火墙没有看到来自 CDN 出口地址的连接记录,此时应优先排查源站地址、端口、访问控制和 TLS,而不是先修改页面缓存 TTL。

验证修复时只改变一个变量

定位完成后,建议按低风险顺序验证,避免同时修改 CDN 规则、源站响应头和防火墙,导致无法判断哪项变更有效。

  1. 保存当前规则、缓存键定义、TTL、响应头和测试结果,记录测试 URL、请求头、时间和边缘节点。
  2. 选择一个无登录态、内容可公开共享的测试对象,优先使用静态文件或测试页面。
  3. 先修正缓存键或缓存条件。例如只排除确认不会改变内容的统计参数,不要直接忽略全部查询参数。
  4. 若修改了源站 Cache-Control 或 Set-Cookie 行为,先确认页面不存在用户数据泄露风险。
  5. 使用同一请求连续测试,观察是否出现“第一次 MISS,后续 HIT”以及源站请求量是否下降。
  6. 确认规则正确后,再对准确的 URL、目录或缓存标签执行失效操作。

缓存清理不是修复规则的替代方案。规则仍然设置为 BYPASS 时,清理后对象依旧不会缓存;规则修复前进行全站清理,还可能让大量请求同时回源,造成日本服务器瞬时负载升高。应优先精确清理,必要时分批预热。

成功验证通常同时满足以下条件:

  • 相同 URL、方法和请求头下,首次请求回源,后续请求能够命中;
  • Age 或供应商缓存状态能够反映对象正在复用;
  • 源站日志中的请求数量明显低于边缘请求数量;
  • 命中请求的 TTFB 明显低于回源请求;
  • 页面内容、语言、权限和 Cookie 行为没有发生错误混用;
  • CDN 和源站的 4xx、5xx、超时没有因规则调整而上升。

如果恢复后再次出现 MISS,应根据结果分支处理:持续 BYPASS 回到规则和响应头;持续 MISS 但查询参数不断变化回到缓存键;MISS 后 5xx 回到网络和源站服务;首次 MISS 后稳定 HIT 则属于正常填充,不应继续清理缓存。

复发监控点

为了避免问题只在用户投诉后才被发现,建议按主机名、路径、状态码和边缘节点分别监控:

  • HIT、MISS、BYPASS、REVALIDATED 的比例;
  • CDN 边缘请求量与日本源站实际请求量的比值;
  • 回源连接失败、DNS 失败、TLS 失败、超时和 5xx;
  • 源站 TTFB、应用处理时间、数据库等待时间;
  • 不同 POP 的命中率和回源延迟;
  • 查询参数种类数量,重点关注无意义参数导致的缓存键膨胀;
  • 带 Set-Cookie、private、no-store 响应的比例;
  • TTL 到期、规则发布、对象清理和批量预热事件;
  • 静态对象发布后旧版本与新版本的命中情况。

告警阈值应以正常业务基线为参照,例如连续数分钟出现 BYPASS 比例明显升高、源站请求量与边缘请求量同步放大,或回源 5xx、超时明显偏离平时水平。这样才能把“缓存规则没有生效”和“日本服务器确实无法稳定回源”区分开,避免反复执行无效的全站清理。

本文由A5数据原创发布,转载请注明出处:https://www.a5idc.com/helpcontent/5145.html

相关推荐