服务重启前后,如何判断Linux文件映射与匿名内存的占用变化?

发布人:A5数据发布时间:2026-11-17 14:45阅读量:2

同一台 Linux 主机上,服务重启后进程 RSS 下降,并不等于文件缓存也被释放;反过来,系统 Cached 看起来没变,也不代表服务进程仍占着同一批内存。要判断文件映射和匿名内存究竟怎样变化,需要把进程、服务 cgroup 和整机指标放进同一个观察窗口,再比较重启前、切换期间和启动稳定后的数据。

先区分三种“占用”

Linux 的进程内存、文件页缓存和服务 cgroup 记账不是同一套口径。判断前先明确各指标能回答什么问题。

先区分三种“占用”配图

指标或数据主要含义常见误读
VmSize、Size进程地址空间或映射区域的虚拟大小映射了文件不代表文件页已读入物理内存
Rss、VmRSS当前驻留在物理内存中的进程页多个进程共享同一页时,逐进程 RSS 相加会重复计算
Pss按共享进程数分摊后的驻留量仍受采样时共享关系、进程范围影响,不等同于 cgroup 记账
Anonymous、RssAnon进程匿名页的相关统计,常见来源包括堆、栈和私有匿名映射不能仅凭一个字段判断是内存泄漏
Shared_Clean、Private_Dirty映射页的共享、干净或私有、脏等属性字段表示的是页状态,不直接说明应用是否还能释放它
/proc/meminfo 的 MemAvailable内核估算在不严重影响系统的情况下可供使用的内存不等于 MemFree,也不是某个服务独占的余量
cgroup v2 的 memory.current、memory.stat一个控制组当前记账及其分类与进程 RSS、主机 Cached 的统计边界不同

文件映射是地址空间与文件内容之间的映射关系。文件中的页被访问后,可能进入页缓存并显示在进程的驻留统计中;映射解除后,页缓存仍可能留在系统中,等待内核按需回收。若某个进程对私有文件映射发生写时复制,修改后的私有页会转为匿名页,不能简单把所有“文件映射”都当成文件缓存。

匿名内存通常随进程退出而释放,但共享内存、仍被其他进程引用的页以及内核管理的内存需要分别看待。进程 RSS 会把该进程映射到的共享页计入自己的驻留量,因此多个进程的 RSS 总和可能高于实际物理页占用;PSS 能减轻这种重复计算,但也不能代替 cgroup 与整机视角。

建立可比较的观察窗口

重启前后应采用相同的统计口径,并记录采样时间、服务 PID、服务 cgroup、负载状态和进程数量。只取一次“重启前”和一次“重启后”的截图,很容易把短暂启动峰值、业务流量变化或缓存预热误认为重启效果。

较实用的观察方式是:

建立可比较的观察窗口配图

  1. 重启前连续采样一段时间,例如每 5 至 10 秒记录一次,覆盖服务处于正常负载的阶段。
  2. 在重启操作前后记录时间点,同时观察旧进程退出、新进程启动和工作进程数量变化。
  3. 等服务恢复就绪,并经过与业务相符的预热期后,再连续采样。预热期长短取决于程序是否会重新加载数据、建立连接或逐步扩展缓存。
  4. 将重启前稳定阶段与重启后稳定阶段比较;重启期间的数据单独用于判断是否出现进程重叠或短时资源峰值。

如果服务运行在 systemd 管理下,可以先确认主 PID 和控制组:

systemctl show app.service -p MainPID -p ControlGroup -p ActiveState
systemctl status app.service

把 app.service 换成实际单元名。主 PID 只代表主进程,不一定包含全部工作进程;若服务派生了多个进程,应进一步查看控制组中的进程,避免只比较主进程而漏掉仍在运行的 worker。服务单元可能包含子控制组,检查时也要留意层级。

下面的只读示例可以在重启前、重启后分别执行,保留输出并对齐时间。它展示主进程的部分统计,以及 cgroup v2 中常见的记账值:

#!/usr/bin/env bash
set -u

unit=${1:?用法:snapshot.sh app.service}

date --iso-8601=seconds
systemctl show "$unit" -p MainPID -p ControlGroup -p ActiveState

pid=$(systemctl show "$unit" -p MainPID --value)
cg=$(systemctl show "$unit" -p ControlGroup --value)

echo "== 主机内存(kB)=="
awk '/^(MemAvailable|Cached|SReclaimable|Shmem|SwapFree):/ {print}' /proc/meminfo

if [[ "$pid" =~ ^[0-9]+$ ]] && (( pid > 0 )) && [[ -r "/proc/$pid/status" ]]; then
    echo "== PID $pid 的 status(kB)=="
    awk '/^(VmRSS|RssAnon|RssFile|RssShmem|VmSwap):/ {print}' \
        "/proc/$pid/status"

    if [[ -r "/proc/$pid/smaps_rollup" ]]; then
        echo "== PID $pid 的 smaps_rollup(kB)=="
        grep -E '^(Rss|Pss|Pss_Anon|Pss_File|Shared_Clean|Shared_Dirty|Private_Clean|Private_Dirty|Anonymous|Swap|SwapPss):' \
            "/proc/$pid/smaps_rollup"
    fi
fi

cgdir="/sys/fs/cgroup${cg}"
if [[ -d "$cgdir" ]]; then
    echo "== cgroup v2:$cgdir =="

    for f in memory.current memory.swap.current; do
        if [[ -r "$cgdir/$f" ]]; then
            printf '%s: ' "$f"
            cat "$cgdir/$f"
        fi
    done

    if [[ -r "$cgdir/memory.stat" ]]; then
        awk '$1 ~ /^(anon|file|shmem|file_mapped|file_dirty|file_writeback|kernel|slab)$/ {print}' \
            "$cgdir/memory.stat"
    fi

    if [[ -r "$cgdir/memory.events" ]]; then
        echo "== memory.events =="
        cat "$cgdir/memory.events"
    fi
fi

smaps_rollup 和 /proc/PID/status 的内存值通常以 kB 表示;cgroup v2 的 memory.current、memory.swap.current 则以字节表示。比较前先统一单位,例如将字节除以 1,048,576 转为 MiB,将 kB 除以 1024 转为 MiB。脚本中的 cgroup 路径适用于常见的 cgroup v2 挂载布局;如果目录不存在,先检查系统使用的 cgroup 版本和挂载路径,不要把“没有读到数据”当成占用为零。

smaps_rollup 适合看单个进程的总体情况,但不能指出具体哪个文件映射变化。需要定位文件时,检查 /proc/PID/smaps 中各映射区域的路径、Rss、Pss、Shared_Clean、Private_Dirty 和 Anonymous;/proc/PID/maps 可辅助识别映射对象,但它本身不提供每个映射的驻留页统计。比较路径时还要注意,重启后 PID 已改变,必须按服务单元和时间重新关联进程,不能把旧 PID 当成同一个进程继续读取。

把进程、cgroup 与整机数据联动

先看服务进程的 Rss 和 Pss 是否变化,再看匿名页相关字段是否同步变化。如果主进程 Anonymous、Private_Dirty 明显下降,同时服务 cgroup 的 anon 和 memory.current 也下降,这组证据支持“重启释放了服务进程持有的一部分匿名内存”。但还需要确认重启后业务负载相近、工作进程数量一致,并且新进程已走过预热阶段,否则差异可能只是新进程尚未分配到正常运行规模。

再看文件映射与整机缓存。smaps 中具体文件映射的 Rss 或 Pss 下降,说明该进程当前驻留的相关映射页减少;若同时看到主机 Cached 仍处于相近水平,可能是映射解除后页仍留在页缓存中,并不矛盾。cgroup file、file_mapped 与主机 Cached 的统计范围不同,也不要求数值相等。file_mapped 变化更接近该控制组中被映射文件页的记账情况,file 则是 cgroup 文件类内存的一项统计。

接着检查 MemAvailable。如果它在匿名内存下降后上升,说明整机可用内存估算与该变化方向一致;如果 MemAvailable 没有明显变化,也不能立刻否定进程释放了内存,可能有其他负载同时增长,或者内核将空闲页用于页缓存。需要把采样窗口内其他进程和系统活动纳入判断。

交换空间也要单独看。进程退出后,VmSwap 或 cgroup memory.swap.current 可能下降,但主机已用交换量不一定立即按预期变化;反过来,SwapFree 增加也不能单独证明发生了内存泄漏修复。可配合 vmstat 1 观察后续采样行中的 si、so,判断系统是否仍在持续换入、换出。关注的是交换活动是否与内存压力同时出现,而不只是某一时刻的交换占用值。

最后检查 memory.events 和内核日志。cgroup v2 中 oom、oom_kill 等计数若在观察窗口内增加,说明控制组曾触发相关内存压力或 OOM 事件;主机级 OOM 则应结合内核日志和整机指标判断。计数器可能包含服务启动以来累计的历史值,应比较前后差值,而不是只看它是否非零。

用一组模拟数据判断变化

下面是一个假设示例。数值用于说明分析方法,不是实测结果。进程数据来自服务主进程的 smaps_rollup,cgroup 数据来自服务所在的 cgroup v2;主机数据来自 /proc/meminfo。重启后采样是在服务就绪、工作进程数量恢复且负载接近的阶段完成。

用一组模拟数据判断变化配图

指标重启前稳定阶段重启后稳定阶段观察方向
主进程 Rss2,300 MiB1,780 MiB下降
主进程 Pss1,640 MiB1,310 MiB下降
主进程 Anonymous1,180 MiB820 MiB下降
主进程 Private_Dirty1,010 MiB710 MiB下降
主机 MemAvailable6,130 MiB6,570 MiB上升
主机 Cached2,860 MiB2,820 MiB大致持平
cgroup memory.current3,680 MiB3,020 MiB下降
cgroup anon1,530 MiB1,080 MiB下降
cgroup file1,840 MiB1,770 MiB小幅下降

这组数据中,进程匿名页、私有脏页和 cgroup anon 同向下降,memory.current 下降,MemAvailable 上升,支持“服务重启后释放了一部分服务进程相关内存”的判断。与此同时,主机 Cached 变化很小,cgroup file 也没有同步大幅下降,说明不能把这次内存回收简单描述为“重启清空了文件缓存”。它更可能体现为匿名内存释放,而部分文件页仍以页缓存形式留在系统中。

这仍不是因果关系的完整证明。若重启后请求量更低、缓存功能尚未预热、worker 数量减少,进程匿名内存变小可能只是工作状态不同。应对照请求速率、活动连接、工作进程数、队列长度或应用自身缓存指标;如果无法控制负载,至少应记录这些变化,并在相近负载下复测。

用映射明细排除替代解释

当汇总指标给出方向后,再定位具体映射:

  • 如果某个文件路径对应的 Rss 下降,而系统 Cached 仍高,说明进程不再以原方式驻留或映射这些页,但页缓存可能仍存在。对文件缓存本身是否能回收,应看系统压力和可用内存变化,不能只凭服务 PID 的映射统计判断。
  • 如果 Private_Dirty 与 Anonymous 同时下降,检查对应区域是否是匿名映射,或是私有文件映射发生过写时复制。写时复制后的私有修改页不再等同于原文件的干净缓存页。
  • 如果 Shared_Clean 或 Pss 下降,但 cgroup memory.current 变化较小,可能存在共享页、其他仍运行的进程或不同的内核记账边界。应检查同一控制组内全部进程,而非仅主 PID。
  • 如果进程 RSS 下降,cgroup file 基本持平,MemAvailable 也没上升,可能只是映射关系发生变化,或释放的页被其他进程、缓存重新使用;这不足以说明整机内存压力已解除。
  • 如果 memory.current 下降而服务进程的匿名页变化不大,还应检查服务子进程是否退出、文件页记账是否变化,以及内核、页表等 cgroup 组成项是否同步改变。

共享库、可执行文件和数据文件都可能出现在进程映射中。共享库被多个进程映射时,逐进程 RSS 会重复计入共享页;PSS 会按共享情况分摊,但若共享页还有 cgroup 外的进程使用,服务内 PSS 合计也不能直接当作该服务独占的物理内存。判断服务整体变化时,可结合 cgroup 指标;定位具体映射时,再回到各 PID 的 smaps。

判断是一次释放,还是持续增长

一次重启后内存下降,能够说明某些统计值发生了变化,但不能单独证明存在泄漏。更有辨识度的做法是在相近负载下记录多个运行周期的稳定值和峰值:每次启动后等待相同的预热条件,再比较匿名页、PSS、cgroup anon 与 memory.current。若这些值在每轮稳定阶段都回到近似范围,运行期间短暂增长可能与正常缓存或业务工作集有关;若它们在相似负载下逐轮抬高,且重启后明显回落,则值得继续分析进程内部的分配、缓存淘汰和对象生命周期。

还应分清“内存被释放”和“内存压力消失”。重启后 MemAvailable 上升、交换活动减弱、OOM 计数不再增加,是压力缓解的相互支持证据;只有 RSS 下降而整机可用内存、交换活动和 cgroup 记账都没有改善,则可能只是统计视角变化或其他负载抵消了释放量。若 memory.events 的 OOM 相关计数继续增长,或内核日志仍记录新的 OOM,应进一步确认是服务 cgroup 的限制触发,还是主机整体内存不足,不能仅凭重启后某个进程的 RSS 变小就结束排查。

判断是一次释放,还是持续增长配图

cgroup v2 通常提供 memory.current、memory.stat、memory.events 等文件;cgroup v1 的文件名称和统计方式不同,常见入口包括 memory.usage_in_bytes 与 memory.stat,具体路径取决于挂载和发行版配置。不要把 v1、v2 文件名混用,也不要把读取失败的字段填成零。普通只读采样即可完成上述比较;为观察效果而主动清理页缓存会改变待测状态,使前后数据失去可比性,因此不应把清缓存作为判断服务映射占用的常规步骤。

下一次复测时,建议把同一时间戳下的主进程 smaps_rollup、服务 cgroup 的 anon/file/memory.current/memory.events、主机 MemAvailable/Cached/SwapFree、交换活动以及服务负载指标放在一起保存。这样既能判断匿名内存是否随进程退出而下降,也能识别文件页是否只是从进程映射转入系统缓存,并区分服务自身变化与整机其他活动造成的伴随变化。

围绕 Linux 服务的运行与数据处理,A5idc数据提供中国香港、美国、日本等地区的物理服务器资源,涵盖不同 CPU、内存容量及 SSD、NVMe 存储配置,可用于企业网站、业务后台、接口服务和数据库等工作负载。不同地区与产品系列各有相应的硬件和网络方案,为服务部署及运行提供基础资源选择。

本文由A5数据原创发布,转载请注明出处:https://www.a5idc.com/helpcontent/9982.html

相关推荐