网站部署在日本服务器后提示磁盘已满,如何区分容量与inode耗尽?

发布人:A5数据发布时间:2026-10-09 14:04阅读量:195

网站上传失败、日志突然停止写入、数据库报出 No space left on device,但管理面板仍显示磁盘有剩余空间——网站部署在日本服务器后遇到这类现象,不能只看磁盘容量百分比。Linux 文件系统既需要可分配的数据块,也需要能用于创建文件的 inode;容量耗尽和 inode 耗尽都可能导致“磁盘已满”。

区分两者的第一步,是在实际发生写入的路径上分别执行 df -h 和 df -i:前者查看容量,后者查看 inode。容量还有剩余、inode 可用数接近零,通常应查大量小文件;容量可用数接近零、inode 仍充足,则应查大文件、日志增长或已删除但未释放的文件。两者都正常时,再检查配额、容器存储、只读挂载和 I/O 故障,而不是直接清理文件。

一、先确认:哪个进程向哪个路径写入失败

保留错误现场,不急着重启

排障前先记录错误发生时间、受影响功能和完整错误。不同提示对应的方向并不相同:

可观察现象或错误优先排查方向不能直接得出的结论
No space left on device目标文件系统容量、inode、元数据资源不一定是整台服务器磁盘容量耗尽
Disk quota exceeded用户、组或项目配额不代表其他用户也无法写入
Read-only file system挂载状态、文件系统保护性只读不应按空间不足直接删除文件
Input/output error存储设备、文件系统、底层连接不一定能靠扩容解决
上传超时、页面偶发 502I/O 延迟、应用等待、资源竞争不能仅凭超时判断磁盘已满

日本机房的位置不会改变 Linux 对容量和 inode 的判断方式。需要区分的是:网站访问链路是否异常,以及服务器本机是否真的无法写入。浏览器上传超时只能作为线索,应用和系统日志中的原始错误才是关键证据。

本文命令适用于常见 Linux 服务器,默认使用 GNU 工具及 sudo。执行前应具备相应权限;涉及删除、服务操作或扩容时,还需要有效备份、维护窗口以及可用的远程控制台。不要把备份继续写入已满的文件系统。

找到真实写入目录

上传文件可能最终保存到 /srv/www/site/uploads,但上传中间过程可能先写入 /tmp、PHP 临时目录或容器内部目录。日志、会话和数据库临时文件也可能使用不同分区。

以实际错误指向的目录为准,先做只读检查:

# 将路径替换为实际写入目录;若文件尚未创建,检查其现有父目录
TARGET=/srv/www/site/uploads

findmnt -T "$TARGET" -o TARGET,SOURCE,FSTYPE,OPTIONS
df -hT "$TARGET"
df -i "$TARGET"

findmnt 用于确认目标路径属于哪个挂载点,df -hT 查看容量和文件系统类型,df -i 查看 inode。

这里需要特别留意:

一、先确认:哪个进程向哪个路径写入失败/找到真实写入目录配图

  • / 有空间,不代表独立挂载的 /var 或 /srv 有空间。
  • tmpfs 受自身大小上限及内存资源约束,不能按普通磁盘分区处理。
  • NFS 等网络文件系统还需要检查存储端容量、配额和状态。
  • 容器里的写入路径,可能属于宿主机挂载卷,也可能属于容器可写层。

若错误发生在 Docker 容器内,应在容器中检查相同路径,再到宿主机核对其映射;命令是否可用取决于容器镜像:

docker exec <容器名> df -hT /实际写入路径
docker exec <容器名> df -i /实际写入路径
docker inspect <容器名> --format '{{json .Mounts}}'

不要仅看宿主机某个目录的剩余空间,就认定容器中的目标路径正常。

二、用容量与 inode 两组结果划分分支

容量和 inode 分别限制什么

容量描述文件系统还能分配多少数据空间;inode 用于记录文件的属性及数据定位信息。普通文件、目录等文件系统对象都需要 inode,硬链接则共享同一个 inode,并非每增加一个名字就新增一个 inode。

因此,大视频、备份包、数据库文件容易消耗容量;缓存、会话、邮件队列和大量小日志容易消耗 inode。大量空文件也可能让 inode 耗尽,尽管它们占用的数据块很少。

以两组示例结果为例:

示例 A:容量不足
Filesystem      Size  Used Avail Use% Mounted on
/dev/vdb1        100G   98G     0 100% /srv

Filesystem      Inodes  IUsed   IFree IUse% Mounted on
/dev/vdb1       6553600 420000 6133600    7% /srv

这里 inode 仍有大量剩余,应沿着“大文件或空间未释放”的方向排查。df -h 中的 G 使用人类可读的二进制缩放;显示值经过取整,不适合直接用于精确容量核算。

示例 B:inode 不足
Filesystem      Size  Used Avail Use% Mounted on
/dev/vdb1        100G   28G   67G  30% /srv

Filesystem      Inodes   IUsed IFree IUse% Mounted on
/dev/vdb1       6553600 6553600     0  100% /srv

这里新增文件可能失败,但向已有文件追加数据有时仍能成功。这也解释了为什么“日志还能写,上传却失败”并不矛盾。

不要只看百分比

判断时应同时查看 Avail、IFree 和业务所需余量。显示为 100% 可能包含取整因素;即使没有达到 100%,一次大型上传或批量生成文件也可能超过剩余资源。

容量状态inode 状态判断与下一步
可用容量接近零inode 充足查大文件、日志、备份、已删除但仍打开的文件
容量充足可用 inode 接近零查缓存、会话、队列、碎片化小文件
两者都接近耗尽两者都紧张分别定位两类占用,不能只处理其中一种
两者都充足两者都正常查配额、实际挂载、容器、只读状态及文件系统异常

ext4 的 inode 数量通常主要在创建文件系统时确定,扩展文件系统可能增加 inode;XFS 会动态分配 inode,但仍受空间、分配限制等条件影响。不能把“inode 固定”作为所有文件系统的统一规则。

三、从目录占用向文件和进程逐层定位

容量不足:先找大目录,再查具体文件

对已确认的挂载点进行扫描,而不是一开始遍历整台服务器。下面以 /srv 为例:

# 只统计当前文件系统,不跨越其下的其他挂载点
sudo du -xhd1 /srv | sort -h

输出可以判断哪个一级目录占用明显。继续对占用最大的目录执行同类检查,逐层缩小范围。

du 虽然不会修改文件,但会读取大量目录项;在 I/O 已经繁忙时,也可能增加负担。先查业务相关目录,避免同时启动多个全盘扫描。若出现权限错误或目录在扫描期间变化,结果可能不完整。

缩小范围后,可以找出较大的普通文件:

sudo find /srv/www/site -xdev -type f -size +500M \
  -printf '%s\t%p\n' | sort -nr | head -n 20

这里 -size +500M 的单位是 MiB,%s 输出字节数。它用于定位候选文件,不表示超过该大小就可以删除。备份包、上传文件、数据库表空间、事务日志和容器层文件的处理方式完全不同。

df 很满、du 不大:检查空间为何未释放

df 统计文件系统层面的空间使用;du 主要统计当前路径可见文件的占用。两者不会严格相等,但明显差距值得进一步调查。

常见原因包括:

  • 文件已删除,但进程仍持有打开的文件描述符。
  • 文件系统元数据或保留空间占用。
  • 某目录被新挂载覆盖,原文件仍在底层文件系统中。
  • 扫描权限不足,或统计路径、挂载范围不一致。
  • 快照、写时复制、共享数据块等文件系统机制导致统计口径不同。

检查已删除但仍打开的文件:

# 需要 lsof;全机结果可能较多,应核对设备和进程
sudo lsof +L1

重点看文件是否属于已满的文件系统、关联哪个进程,以及大小是否足以解释差距。对于稀疏文件,显示的逻辑大小也不一定等于实际占用。

删除正在写入的日志,不一定立即释放空间。通常需要进程关闭原文件描述符,或通过该软件支持的机制重新打开日志。应优先使用服务官方支持的日志重开方式;若只能重启,应评估连接中断并安排维护窗口。不要直接杀死数据库进程,也不要向不明确支持该机制的进程发送信号。

三个连续状态展示目录项和文件描述符共同引用日志对象、删除最后一个硬链接后仅剩进程引用、最后打开引用关闭后资源释放;突出 df 与 du 观察层面的不同

inode 不足:优先找“小文件密集区”

使用 GNU du 时,可以统计目录树中的 inode 使用量:

sudo du --inodes -x -d 1 /srv | sort -n

若某个缓存目录占用数百万 inode,而总容量很小,它就可能是问题来源。对该目录继续分层统计,关注:

  • 会话文件没有按过期时间回收。
  • 每次请求生成一个缓存文件。
  • 缩略图或分片文件没有生命周期管理。
  • 队列消费异常,任务持续堆积。
  • 日志切分粒度过细,生成大量独立文件。

若系统中的 du 不支持 --inodes,可对已缩小范围的目录计数:

sudo find /srv/www/site/cache -xdev -type f -printf '.' | wc -c

这个结果是普通文件数量,不是严格的 inode 使用量:硬链接、目录和其他对象会产生差异。但它能帮助判断某个目录是否存在大量小文件。

不要急着用递归删除释放 inode。缓存可能需要先停写或锁定,队列文件可能承载未完成任务,会话清理可能导致用户退出。应先确认生成者和保留规则。

四、两组指标正常时,继续查配额、I/O 和文件系统

有剩余空间,为什么应用仍然不能写

df 展示的文件系统资源,不等于每个用户、项目或存储卷都能使用的额度。主机控制面板、用户配额、XFS 项目配额、容器可写层限制,都可能让应用先达到自己的上限。

先确认应用实际运行用户及挂载选项,再根据文件系统和已经启用的配额机制查询:

# 已安装相应配额工具时,查询实际应用用户
sudo quota -u <应用用户>

# 仅适用于 XFS,且需要在正确挂载点查询
sudo xfs_quota -x -c 'report -h' /srv

这里的 report 只用于查询,不修改配额。工具不存在或查询失败,并不能证明没有配额,应继续核对挂载选项、服务商控制面板或存储平台限制。对于容器,也不要直接删除宿主机的存储驱动目录。

ext4 还可能保留部分块供特权用户和系统维护使用,普通应用因此无法使用全部剩余块。降低保留比例不是通用修复办法,尤其不应在根文件系统上盲目操作。

I/O 延迟会造成超时,但不等于空间耗尽

如果应用报的是超时、写入缓慢,容量和 inode 又正常,应观察存储延迟。安装了 sysstat 的系统可以使用:

iostat -xz 1 5

通常应重点看后续采样,而不是仅看第一组自启动以来的平均值:

  • await 持续升高,表示请求完成时间增加,其中包含排队时间。
  • 队列指标升高,同时业务变慢,可能是存储承压。
  • %util 接近 100% 可作为繁忙线索,但不能单独衡量现代 NVMe 或多队列设备的性能上限。
  • 扫描、压缩和备份本身也可能制造 I/O 压力。

例如,正常时 await 约为数毫秒,故障期间持续上升到数十甚至上百毫秒,并与上传超时同步,才构成较有价值的关联。阈值需要结合设备类型和业务基线判断。

发现只读或 I/O 错误,暂停清理和扩容

检查挂载状态及近期内核日志:

findmnt -T "$TARGET" -o TARGET,SOURCE,FSTYPE,OPTIONS
sudo journalctl -k --since "30 minutes ago" --no-pager

重点关注 I/O error、设备重置、文件系统错误,以及类似 Remounting filesystem read-only 的信息。

如果文件系统因错误进入只读状态,强行重新挂载为读写可能扩大损坏。此时应降低业务写入、保留日志,联系服务商检查底层存储,并准备在救援环境中处理。

不要对正在挂载、尤其仍在写入的文件系统直接执行修复。 ext4 与 XFS 使用不同工具和流程;修复前必须核验备份,并按工具要求卸载文件系统或进入救援环境。删除文件和增加容量都不能替代文件系统修复。

五、按结果修复:先阻止增长,再释放资源

日志或大文件挤满容量

先处理增长源:异常重试、调试日志、攻击请求、失败队列,都可能让刚释放的空间迅速被重新占用。临时降低日志级别、暂停异常任务或限制写入时,应记录原配置,明确影响,并在验证后恢复必要功能。

对于使用 logrotate 的环境,可以先检查配置而不执行轮转:

sudo logrotate -d /etc/logrotate.conf

调试模式用于查看匹配规则和配置问题,不会真正轮转日志。实际执行前,应确认保留份数、压缩策略、应用日志重开方式,以及归档目标是否有容量和 inode。不要在空间不足时盲目强制轮转;压缩或复制可能暂时需要额外空间。

确需删除文件时,只选择已经停止写入、确认过期且允许清理的对象。下面展示单个归档文件的安全处理方式,不适用于活动日志、数据库文件或未知文件:

# /mnt/backup 必须是已挂载、空间和 inode 充足的独立备份文件系统
findmnt -T /mnt/backup
df -h /mnt/backup
df -i /mnt/backup

sudo cp -a -- /srv/archive/old-backup.tar.gz /mnt/backup/old-backup.tar.gz
sudo cmp -- /srv/archive/old-backup.tar.gz /mnt/backup/old-backup.tar.gz

# 仅在复制成功、校验一致且目标确实允许删除后执行
sudo rm -i -- /srv/archive/old-backup.tar.gz

备份文件名应提前确认不与已有备份冲突,避免覆盖。若需要恢复,可将备份复制回原路径,但前提是原文件系统已经有足够资源;同时重新核验属主、权限及业务识别情况。

数据库事务日志、二进制日志和表空间,应使用对应数据库的管理机制处理。直接删除可能破坏恢复能力、复制关系或数据库运行状态。

inode 耗尽:处理文件生命周期

inode 故障的重点不是“删掉最大的文件”,而是减少不必要的文件对象。

清理前,先用只读查询预览符合保留规则的对象,例如:

# 仅为候选检查:列出修改时间超过 7 天的普通文件,不执行删除
sudo find /srv/www/site/cache -xdev -type f -mtime +7 -print

-mtime +7 按完整的 24 小时区间取整,并不等价于精确的“七天前”。文件修改时间也不一定代表业务过期时间,所以不能把这条命令直接改成批量删除。

更稳妥的流程是:依据应用过期规则确认候选,备份不可重新生成的数据,在受控写入条件下分批清理,再观察 IFree 是否回升。删除无法直接撤销;可恢复性来自已经验证的备份。会话清理可能导致重新登录,队列清理可能丢失任务,这些影响需要提前确认。

长期修复应包括文件过期机制、清理失败告警、队列堆积监控,以及调整过度碎片化的存储方式。仅增加容量未必能解决 inode 不足;是否增加 inode,要结合文件系统和扩容方式验证。

确实需要扩容时,核对每一层是否完成

扩容通常涉及“云磁盘或虚拟磁盘—分区或逻辑卷—文件系统”三个层次。控制面板显示磁盘变大,不代表应用已经获得新空间。

先检查拓扑:

lsblk -o NAME,SIZE,TYPE,FSTYPE,MOUNTPOINTS
findmnt -T "$TARGET" -o TARGET,SOURCE,FSTYPE

若系统不支持 MOUNTPOINTS 列,可使用 MOUNTPOINT。执行前应有已验证备份,并确认设备名称;LVM、加密卷和多层映射不能套用普通分区步骤。

只有在底层设备及必要的分区或逻辑卷已经扩展、且核验无误后,才进行文件系统扩展。例如:

# 示例:确认 /dev/vdb1 是目标 ext4 文件系统,且底层已扩大
sudo resize2fs /dev/vdb1

# 示例:确认 /srv 挂载的是目标 XFS,且底层已扩大
sudo xfs_growfs /srv

两条命令分别适用于 ext4 和 XFS,不应连续照抄执行。若扩展失败,保留错误输出并重新检查各层大小,不要尝试强制修复。扩容通常没有简单的原地回滚,尤其 XFS 不支持常规缩容;回退应依赖经过验证的备份或快照恢复方案,而不是随意缩小设备。

自下而上的三层资源结构,上接实际写入路径;在文件系统层并列展示 ext4 与 XFS 两种条件分支,附上核验入口与备份前提

六、修复后复测,并观察资源是否再次下降

用应用身份验证,而不是只用 root 写文件

root 的权限和配额待遇可能与网站进程不同。应先核对实际服务用户,再在真实目标目录创建一个小测试文件:

# 替换服务用户和目录;测试文件会在写入成功后删除
sudo -u <应用用户> sh -c '
  f=$(mktemp /srv/www/site/uploads/.disk-check.XXXXXX) || exit 1
  printf "disk-check\n" > "$f" || exit 1
  rm -- "$f"
'

该操作只创建并删除随机命名的测试文件。若写入阶段失败,可能留下空测试文件,需按输出结果检查。测试成功可以证明当时基本创建和写入可用,但不能证明大文件上传、数据库事务或容器内路径全部正常。

随后复测真实业务:

  1. 上传一个可清理的测试文件,确认临时目录和最终保存目录均正常。
  2. 检查应用日志恢复写入,旧错误不再持续出现。
  3. 确认数据库或队列从先前失败状态恢复;积压任务不要一次性全部放开。
  4. 重新检查目标路径的容量、inode 和 I/O 指标。
  5. 在下一次日志轮转、备份或定时清理后再次检查。

观察增长速度,比一次“恢复正常”更重要

建议同时监控可用容量、可用 inode、增长速度和 I/O 延迟。初期可以把容量或 inode 使用率达到 80% 作为提醒、90% 作为升级告警的参考起点,但大批量写入业务需要更早预警;具体阈值应结合峰值任务所需余量制定。

例如,可用空间为 12 GiB、日志净增长约 2 GiB/小时,在增长速度不变时约 6 小时就可能耗尽;可用 inode 为 60 万、每分钟净新增 1 万个对象,则约 60 分钟耗尽。这里应使用“新增减清理”的净增长量,而非只统计创建速度。

对于部署在日本服务器上的网站,最终应能明确回答:失败发生在哪个挂载点,是可用容量还是可用 inode 不足,是什么进程持续消耗资源,修复后预计还能支撑多久。完成当次写入验证,再持续观察一个业务高峰及一个完整的日志、备份或清理周期,才能判断故障是否真正受控。

围绕日本网站持续积累的上传文件、日志和数据库数据,A5数据提供多种日本物理服务器资源:热销系列以Xeon Gold、AMD EPYC平台搭配NVMe存储,为网站程序与数据库读写提供硬件基础;CTG系列涵盖SSD及大容量HDD方案,可承载文件存储、备份与归档业务。不同系列还提供相应的跨境及国际线路选择,兼顾网站的数据承载与访问网络需求。

本文由A5数据原创发布,转载请注明出处:https://www.a5idc.com/helpcontent/2993.html

相关推荐