Linux服务器删除文件后空间未释放,如何定位占用进程?
文件已经执行 rm,但 df 显示的可用空间没有增加,常见原因是文件名虽已从目录中删除,仍有进程持有该文件的打开句柄。只要句柄未关闭,文件占用的磁盘块通常就不会释放;进程退出或关闭句柄后,空间才可能回收。
排查时不要先重启服务器或批量结束进程。先确认容量和 inode 是否确实异常,再找出仍被打开的已删除文件,核对所属进程和业务影响,最后选择合适的释放方式并复测。若 df 与 du 的结果不一致,也可能是挂载点、容器文件系统或权限范围造成的,不能直接认定是进程占用。

先确认异常发生在哪里
以下命令适用于常见 Linux 发行版。建议在问题发生的主机上以有权限查看目标文件和进程的账号执行;权限不足时可在命令前加 sudo。先记录输出,便于处理前后比较。
df -hT
df -ih
df -hT 按文件系统显示容量、已用空间、可用空间、使用率和类型;df -ih 查看 inode 使用情况。重点确认业务报错所对应的挂载点,而不是只看根目录 /。例如,日志目录可能单独挂载在 /var,容器数据也可能位于其他文件系统。
- 容量使用率接近或达到 100%,但 inode 仍充足:优先调查大文件和已删除但仍打开的文件。
- inode 使用率接近或达到 100%,但容量尚有余量:优先调查大量小文件。删除一个大文件未必能解决 inode 耗尽。
df显示空间紧张,但服务报错发生在另一个挂载点:先核对报错路径实际落在哪个文件系统上。df的数值正常而业务仍提示写入失败:还需检查目录权限、只读挂载、配额或文件系统错误,不能仅凭“磁盘满”处理。
可以用 findmnt 查看指定路径对应的挂载信息:
findmnt -T /var/log
将 /var/log 换成实际出问题的目录。输出中的 SOURCE、FSTYPE 和 TARGET 可帮助确认它对应哪个设备、文件系统类型和挂载点。如果目录位于容器或独立数据盘中,后续检查也要对准相应的文件系统。
对照 df 与 du,缩小范围
df 统计文件系统占用的块,du 则从目录树中统计当前可见文件的占用。对已删除但仍被进程打开的文件,目录树中已经没有文件名,du 通常无法统计它;因此,df 明显高于 du 时,打开的已删除文件是值得检查的方向之一,但并非唯一原因。
先从目标挂载点的顶层查看可见目录占用:
sudo du -xhd1 / 2>/dev/null | sort -h
此命令使用 GNU du 的 -d 参数;若系统不支持,可执行 du --version 确认版本,或改用该发行版支持的深度参数。-x 表示不跨越其他文件系统,避免把独立挂载点的占用混在一起。若异常位于 /data,应把命令中的 / 换成 /data。
查看结果时注意:
- 某个目录占用突出:继续对该目录向下分层查看,确认是日志、缓存、备份还是业务数据。
du汇总明显小于同一文件系统的df已用空间:检查已删除但仍打开的文件、其他挂载或容器视图、文件系统保留空间等因素。- 执行
du时权限不足:被跳过的目录会让统计偏小。检查命令输出和退出状态,不要把权限错误误判为文件句柄占用。 du扫描可能增加磁盘读取和元数据访问。容量紧张但业务繁忙时,先限定到目标挂载点或可疑目录,避免反复扫描整盘。
如怀疑 inode 耗尽,可统计目标目录下的文件数量并逐层缩小范围。例如:
sudo find /var -xdev -type f -printf '%h\n' 2>/dev/null | sort | uniq -c | sort -n | tail
该示例依赖 GNU find。它按文件所在目录计数,结果靠后的目录可能包含较多普通文件;它不等同于 inode 的完整统计,也不会列出目录、符号链接等所有类型。若系统的 find 不支持 -printf,可先查看 find --help,改用系统提供的统计工具。不要为了释放 inode 而直接删除无法确认用途的文件。
定位仍被打开的已删除文件
先使用 lsof 检查链接数为零、但仍由进程打开的文件:
sudo lsof +L1
lsof 未安装时,可按发行版的软件包管理方式安装;生产环境不方便安装软件时,可以使用后文的 /proc 检查方法。命令可能输出较多,优先关注 NLINK 为 0、NAME 中带有 (deleted) 的记录。典型输出可类似于:
COMMAND PID USER FD TYPE DEVICE SIZE/OFF NLINK NAME
app 2187 app 12w REG 253,0 4.0G 0 /var/log/app.log (deleted)
这类示例表示:进程 app(PID 2187)仍以写方式打开一个约 4 GiB 的普通文件,但该文件已不再有目录链接。只要该句柄仍被持有,对应空间就可能继续计入文件系统使用量。示例数字用于说明读法,不代表读者主机上的实际情况。
判断时不要只看文件名,至少核对以下信息:
- PID 和进程名:确认进程是否仍存在,是否属于当前业务。
- 文件描述符
FD:例如12w表示编号为 12 的文件描述符以写方式打开;带mem等标记的记录含义不同,应结合TYPE和进程实际情况判断。 - 文件大小与设备:
SIZE/OFF可用于估算该句柄关联文件的大小;DEVICE帮助判断它属于哪个设备。多个句柄可能指向同一个文件,不能将列表中所有大小简单相加。 - 路径和业务用途:带
(deleted)的路径只是删除前的名称线索,需确认它确实位于空间紧张的文件系统上。
找到候选 PID 后,继续查看进程及其服务归属:
ps -p 2187 -o pid,ppid,user,lstart,cmd
sudo systemctl status 2187
将 2187 替换为实际 PID。systemctl status 在 systemd 系统上可尝试用于核对服务;它并非所有进程都能按 PID 映射到服务。若没有对应单元,可查看进程的父进程、启动方式和业务负责人,不要仅凭进程名猜测用途。
没有 lsof 时检查 /proc
Linux 会在 /proc/<PID>/fd/ 下展示进程当前打开的文件描述符。可先检查可疑进程:
sudo ls -l /proc/2187/fd
输出中若出现类似 /var/log/app.log (deleted) 的链接,说明该进程仍持有对应的已删除文件。该路径是文件描述符的线索,不是一个可按普通文件名直接清理的目录项。
需要进一步看某个句柄的大小时,可读取其状态信息:
sudo stat -L /proc/2187/fd/12
将 PID 和 12 替换为实际值。-L 让 stat 跟随 /proc 中的符号链接检查其指向对象。若进程恰好退出或关闭了句柄,检查结果可能随之变化;可重新检查当前状态。不要用 cat /proc/<PID>/fd/<FD> 来确认大文件内容,这可能触发大量读取,而且不能解决空间占用。
根据结果选择处理方式
确认目标是已删除但仍打开的文件后,先确定它是日志、临时文件还是业务数据,再选择释放方式。关闭句柄通常会释放该文件占用的空间,但如果其他进程也持有同一文件,或该文件仍有其他链接,占用不一定立即全部消失。
日志文件:优先使用应用支持的重新打开方式
如果文件是应用日志,先确认应用是否支持重新打开日志文件,以及其正式的日志轮转流程。若应用支持,可按该应用的文档通知它重新打开日志,或使用经过核实的 logrotate 配置。不同程序对信号的处理不同,不能把某个信号当作通用“重新打开日志”命令。
操作前确认:
- 应用的日志重载机制及适用版本;
- 目标日志路径、轮转配置和当前句柄归属;
- 执行后应用是否仍能继续写入新日志;
- 是否需要保留旧日志用于审计或故障分析。
不要在未核对配置时直接手动删除日志、修改轮转规则或向进程发送未确认的信号。若应用没有安全的日志重开方式,应在维护窗口中评估重启或其他处置方案。
临时文件或可重建文件:确认无读写依赖后关闭句柄
若已确认文件是可丢弃的临时数据,仍需检查进程是否正在读取或写入它,以及关闭句柄会不会导致任务失败。合适的处理方式通常是让应用正常关闭该文件,或按服务的维护流程重启进程。服务重启可能中断连接、任务或队列处理,应先确认影响范围和恢复步骤。
通过正常方式关闭句柄后,重新执行 lsof +L1 和 df -hT。如果记录消失且对应文件系统可用空间增加,说明该句柄释放了占用。若记录仍在,可能还有其他进程持有它;若记录已消失但空间变化不明显,则检查文件系统、其他占用和统计口径。
直接清空 /proc 句柄:高风险,仅作评估后的应急选项
某些场景中,运维人员会尝试对 /proc/<PID>/fd/<FD> 指向的文件执行截断。这会改变该文件的内容,并可能影响持有它的所有进程,正在读取、写入或依赖完整内容的程序可能因此出错。它不是无损释放空间的方法,也不能恢复已删除文件的数据。
只有在确认目标文件可丢弃、业务负责人同意、具备必要备份或已接受数据不可恢复的前提下,才评估此类操作。操作前记录 PID、FD、文件大小、设备和所属服务;如果无法确认目标,或文件可能包含业务数据,不要执行。截断不可通过“回滚命令”恢复,回滚依赖事先的有效备份或快照。若确需应急处置,应优先使用应用自身支持的关闭或轮转方式,并安排验证和业务观察。
结束进程也不是首选方案。kill -9 会跳过程序的正常清理流程,可能中断请求、任务或数据写入;在没有确认进程用途、服务恢复能力和维护授权前,不应执行。若决定重启服务,按该服务的运维流程操作,并提前准备恢复步骤。
lsof 没有找到时,继续排查这些分支
没有查到 +L1 记录,不代表 df 与 du 的差值一定异常,也不代表问题已经解决。按下列方向继续核对:
- 检查权限和检查范围:用有权限的账号重跑命令,确认检查的 PID 视图与文件系统一致。容器内看到的进程和挂载范围可能不同于宿主机。
- 核对挂载与容器存储:用
findmnt -T <路径>确认路径落点。容器的可写层、卷和宿主机目录可能分别计入不同文件系统;应到实际承载该数据的主机或挂载点检查。 - 检查文件系统保留空间:部分文件系统会为系统使用或应急保留一定空间,因此普通账号看到的可用空间可能少于预期。保留策略和可调整参数因文件系统而异,不要在未核对文件系统类型与用途时修改。
- 检查配额与只读状态:用户或项目配额耗尽、挂载被切为只读,都可能造成写入失败,但并不一定表现为整盘使用率 100%。结合具体报错和挂载状态判断。
- 查看 I/O 和系统日志:若容量尚有空间但写入延迟明显,问题可能在存储 I/O、文件系统错误或设备异常,而非删除未释放。可以查看近期内核日志:
sudo journalctl -k --since "30 minutes ago"
--since 支持相对时间的 systemd 日志查询。关注文件系统错误、设备超时或 I/O error 等信息;日志中没有相关记录也不能单独证明存储完全正常。如果系统没有 journalctl,使用该发行版对应的内核日志查看工具。遇到文件系统错误或设备异常,应先保护数据并按存储平台的故障流程处理,避免在未评估风险时执行修复或强制卸载。
还要区分“空间未释放”和“监控尚未刷新”:监控平台可能有采集间隔,df 的结果也可能因操作前后检查了不同挂载点而不一致。以同一主机、同一挂载点上的复测结果为准。
处理后复测并持续观察
释放句柄后,使用同一挂载点重复检查容量、inode 和残留句柄:
df -hT /var
df -ih /var
sudo lsof +L1
将 /var 换成实际目标挂载点。若 lsof +L1 不再显示目标记录,且 df 的可用空间相应增加,可确认该文件句柄不再占用原有空间。若可用空间没有明显变化,检查是否还有其他句柄、相同文件是否被多个进程持有,或实际紧张的是另一个文件系统。若文件系统使用率已改善但 inode 仍接近耗尽,应另行定位大量小文件;两种问题的处理对象不同。
处理完成后观察一段业务运行时间,确认应用仍能正常写日志、处理任务,I/O 延迟和容量趋势也没有再次异常。若删除同类日志后空间反复被占满,应修复日志轮转、保留周期或应用写入策略,而不是只依靠临时释放句柄。对生产主机,保留处理前后的挂载点、PID、文件路径线索和复测结果,便于后续确认根因及制定容量告警阈值。
针对 Linux 服务器上日志、数据库和业务文件长期运行带来的存储与资源管理需求,A5数据提供香港、美国、日本、韩国、中国台湾、新加坡及马来西亚等地区的物理服务器租用,覆盖常规建站、AMD计算与存储型方案。产品可选 SSD、NVMe、大内存及大容量企业级硬盘配置,香港存储系列还提供多盘位与硬件阵列控制器,适合承载业务日志、数据库文件、备份归档和多任务服务。
本文由A5数据原创发布,转载请注明出处:https://www.a5idc.com/helpcontent/4817.html



