美国服务器Linux文件占用持续增长,如何区分日志、删除文件句柄和业务数据?
磁盘使用率持续上升时,df显示的是文件系统已分配空间,du统计的是目录中仍可遍历的文件;两者不一致,不一定意味着统计错误。常见原因包括日志持续写入、文件已删除但仍被进程打开、业务文件正常增长,以及挂载点或 inode 耗尽。

排查时先确认空间和 inode 哪一项接近上限,再沿着文件系统、目录、进程逐层定位。美国服务器使用的 Linux 发行版和文件系统可能不同,命令结果也会受权限、容器和挂载方式影响;以下操作以常见 GNU/Linux 环境为例,先只读检查,确认对象和影响范围后再处理。
先确认空间、inode 和挂载点
用 df 查看各文件系统的已用空间和使用率:
df -hT
Use%接近 100% 表示文件系统可用容量不足;Type可帮助识别文件系统类型。重点看实际存放日志、业务数据或临时文件的挂载点,不要只关注根目录 /。如果文件系统容量看似足够,但程序仍报告“没有空间”,还要检查 inode:
df -i
inode 使用率接近 100% 时,即使还有可用容量,也可能无法新建文件。常见诱因是某个目录积累了大量小文件,例如任务队列、缓存目录或按请求生成的临时文件。
再确认目录所在的文件系统和挂载关系:
findmnt -T /var
lsblk -f
将 /var替换成待查路径。findmnt显示该路径实际落在哪个挂载点;如果它位于单独的分区或网络文件系统,后续统计要在对应文件系统内进行。若路径涉及容器,还需确认宿主机目录、容器挂载和容器自身看到的路径之间的对应关系。
从文件系统向目录缩小范围
针对占用异常的挂载点,按一级目录统计。下面假设目标挂载点为 /:
sudo du -xhd1 / 2>/dev/null | sort -h
-x限制在同一文件系统内,避免把其他挂载点的内容混入;-d1只列出一层目录;sort -h按容量排序。若系统自带的 du不支持 -d,可先用 du -shx /* 2>/dev/null查看,再进入较大的目录继续统计。执行时可能需要较高权限;权限不足会导致结果少算,2>/dev/null也会隐藏错误信息,必要时去掉它检查访问失败的路径。
发现 /var或业务目录占用较大后,继续向下查:
sudo du -xhd1 /var 2>/dev/null | sort -h
sudo du -xhd1 /var/log 2>/dev/null | sort -h
这些命令只用于定位,不会删除文件。若某个目录显示很大,可以继续查看其子目录;若 du显示的总量远小于 df已用空间,优先检查已删除但仍打开的文件、权限导致的漏统计,或其他挂载和文件系统特性。
空间统计还可能受稀疏文件影响:文件的逻辑长度很大,实际占用的磁盘块却较少。可比较实际占用和表观大小:
du -h /path/to/file
du --apparent-size -h /path/to/file
表观大小明显高于实际占用时,不能仅凭 ls -lh或文件逻辑长度判断磁盘已消耗同等容量。涉及数据库文件、虚拟磁盘或备份文件时,不要因为文件名大或修改时间旧就直接删除。
判断增长来源:日志、删除文件句柄还是业务数据
日志文件持续增长
查看日志目录中体积较大的文件和修改时间:
sudo find /var/log -xdev -type f -printf '%s %TY-%Tm-%Td %TH:%TM %p\n' 2>/dev/null \
| sort -n | tail -20
输出第一列是字节数,最后一列是路径;该命令使用 GNU find,在不支持 -printf的系统上可改用 ls -lh逐个检查。文件体积大且修改时间不断更新,可能是持续写入的日志,但也要确认它由哪个服务生成,不能只凭路径名称判断。
如果系统使用 systemd 日志,可检查 journal 占用:
sudo journalctl --disk-usage
如果 journal 占用明显,可结合服务运行情况和日志保留要求制定清理策略。不要为了快速腾空间就清空整个日志目录:这会丢失故障调查和审计所需记录,也可能删掉服务仍在使用的文件。先确认日志轮转配置、保留周期、备份要求和应用是否能重新打开日志。调整轮转策略或清理旧归档后,记录变更并观察增长速度是否回落。
文件已删除,但进程仍持有句柄
Linux 中,删除文件名不等于立即释放磁盘空间。如果进程仍打开该文件,目录里看不到它,du也统计不到,但文件系统空间会继续被占用。先比较:
df -hT
sudo du -xsh /var /home /srv 2>/dev/null
如果 df显示使用量很高,而可遍历目录的 du合计明显偏小,可检查已删除但仍打开的文件:
sudo lsof +L1
输出中带有 (deleted)的条目值得关注。记录对应的进程号、文件描述符、文件大小和进程名称;同一个文件可能被多个进程持有,不能把重复条目简单相加。lsof未安装时可检查 /proc,但同样需要足够权限:
sudo find /proc/[0-9]*/fd -lname '*deleted*' -ls 2>/dev/null
找到进程后,不要直接结束进程或重启整台服务器。先确认服务用途、冗余情况和数据写入状态,再使用应用支持的日志重开机制,或在维护窗口按服务管理方式重启相应进程。对于尚未刷盘的数据,强制终止可能造成内容丢失或业务中断;数据库、队列服务等尤其不能按普通日志进程处理。释放句柄后,用 df -hT复核空间变化,并检查服务健康状态和应用日志。
业务数据或小文件数量增长
若 df和 du的结果大致吻合,且大目录中是数据库文件、上传内容、备份、缓存或业务归档,空间增长更可能来自仍存在的数据。应结合业务数据保留策略、文件创建时间和增长趋势判断,不要把“旧文件”直接等同于“可删除文件”。
inode 紧张时,按目录统计文件数量通常比找大文件更有效。以下命令会遍历目录,目录很大时可能耗时较长:
sudo find /path/to/data -xdev -type f | wc -l
sudo find /path/to/data -xdev -type f -printf '%h\n' 2>/dev/null \
| sort | uniq -c | sort -n | tail -20
第一条统计文件总数,第二条按父目录统计文件数量;将路径替换为已确认的业务目录。某目录文件数特别多,可能来自任务未清理、短周期缓存或异常重试。先确认程序是否仍依赖这些文件,再通过应用自身的过期清理机制处理。不要用宽泛的 find ... -delete命令批量删除未知文件。
面向日志留存、数据库写入和业务文件积累等场景,A5idc数据提供美国物理服务器,涵盖Xeon与AMD EPYC平台。美国AMD系列具备大内存与NVMe存储组合,并有双NVMe硬盘配置,为数据库、容器和多任务应用提供计算与存储资源,满足业务数据持续积累过程中对存储容量、读写资源及内存配置的不同需求。
容量之外,还要核对 I/O 和文件系统状态
磁盘使用率上升与 I/O 延迟是不同问题:空间充足不代表读写正常,I/O 等待升高也不一定由大文件造成。若系统安装了 sysstat,可观察设备延迟和利用率:
iostat -xz 1 5
重点关注对应设备的 await、读写负载及 %util趋势。单次采样只能作为线索;持续高延迟可能与突发读写、存储负载或设备异常有关,应结合业务延迟和监控时间段判断。云主机或虚拟服务器中,底层存储信息可能不可见,不能仅凭某一个指标判定硬件故障。
检查内核近期是否报告文件系统或块设备错误:
sudo dmesg -T | tail -100
如果看到 I/O error、文件系统错误或挂载转为只读,先保留错误信息和时间点,检查服务状态及数据可读性,并按具体文件系统和服务商环境处理。不要在仍挂载并承载业务写入的文件系统上贸然运行修复命令;文件系统修复可能影响数据,应先评估备份和停机窗口。若服务器由服务商托管,可将设备信息、错误日志和发生时间一并提供给技术支持核查。
根据结果选择低风险处理方式
| 排查结果 | 常见含义 | 处理方向 |
|---|---|---|
df和du都显示同一目录增长 | 文件仍存在且占用空间 | 识别业务归属,按保留策略归档或清理 |
df高、du合计偏低,lsof发现 deleted 文件 | 文件名已删除但进程仍持有 | 确认进程和数据风险,按应用机制释放句柄 |
容量尚可但 df -i接近满 | 大量小文件耗尽 inode | 定位文件数量集中的目录,处理生成或清理逻辑 |
| 空间和 inode 正常,但业务变慢 | 可能是 I/O 延迟或其他瓶颈 | 结合 iostat、内核日志和业务监控继续判断 |
| 文件系统报错或转为只读 | 存储或文件系统状态异常 | 暂停高风险写操作,保护数据并评估修复方案 |
清理或调整之前,先确认备份可用、文件归属明确、保留期限符合业务要求。删除操作不可轻易撤销;若要清理归档,应优先采用应用或日志管理工具,并先列出拟处理对象、抽样核对路径,再按明确范围执行。避免直接删除数据库文件、正在使用的日志文件或未知目录内容。
若确实需要结束持有已删除文件的进程,操作前记录进程号、服务名和当前状态,并确认该服务可恢复、已纳入维护窗口且有必要的数据保护措施。优先通过服务自身支持的日志重开或受控重启释放句柄;若操作后出现异常,按既定服务恢复流程回滚,例如恢复原服务配置并重新启动已停止的服务。不要将强制杀进程作为通用方案,也不要对所有服务器统一套用同一服务名或信号。
修复后复测并持续观察
处理完成后,重新检查空间、inode 和目标目录:
df -hT
df -i
sudo du -xhd1 /path/to/mount 2>/dev/null | sort -h
如果处理的是已删除文件,再次运行 lsof +L1确认相关句柄是否消失;如果调整了日志策略,观察日志是否按预期轮转,而不是只看清理后短暂下降的使用率。若处理的是大量小文件,确认 inode 使用率下降,同时业务任务没有因文件缺失而失败。
最后把文件系统使用率、inode、目录增长速度和 I/O 延迟放到同一时间线上观察。比如,某个挂载点短时间内增长数 GB、但日志轮转正常,可能需要排查业务数据或备份任务;如果空间在释放句柄后回落,则应继续检查应用关闭文件的行为。阈值应按磁盘容量、业务峰值和扩容周期设置,并为告警留出处理时间。只有连续观察到增长来源受控、服务状态正常且空间回到可管理范围,排查才算完成。
本文由A5数据原创发布,转载请注明出处:https://www.a5idc.com/helpcontent/8973.html



