独立服务器进入救援模式后,如何备份数据并安全重装系统?
进入救援模式后,服务器通常只是启动到了临时维护系统,原有操作系统、数据库和业务文件并没有自动完成备份。安全重装的目标不是“把系统重新装上”,而是在可验证的数据备份、明确的影响范围和可执行的回滚路径基础上,将服务器恢复到一个能够启动、联网、挂载数据并通过业务验收的目标状态。
生产环境中,重装前应先回答六个问题:哪些数据必须保留、哪些服务会中断、备份是否可读、准备重装的磁盘是否确认无误、重装后如何验证、验证失败时能否回到旧系统。只要其中一项没有明确答案,就不应继续执行擦除或重新分区操作。

现状核对:先确认救援环境和原系统边界
明确变更目标与影响范围
先把本次变更的目标写成可验收的状态,而不是笼统地描述为“重装服务器”。例如:
- 目标系统:指定发行版和大版本,使用 UEFI 或传统 BIOS 的启动方式保持与硬件匹配。
- 目标磁盘:只重装系统盘,数据盘保持原分区和文件系统;或者明确重建全部磁盘。
- 目标服务:SSH、网络服务、Web 服务、数据库、定时任务和监控代理。
- 目标数据:业务文件、数据库目录、上传文件、证书、密钥、配置文件、计划任务和容器持久化卷。
- 允许中断:维护窗口内停止业务,DNS、负载均衡和外部依赖是否需要同步切换。
- 变更完成条件:系统能够稳定启动,外部探测成功,核心接口和数据读写通过验证。
救援模式本身通常来自服务商的网络启动环境、远程管理控制台或安装介质。它可能拥有独立的临时根文件系统,原系统的根分区可能没有挂载,也可能被自动以读写方式挂载。不要把救援环境中的 /etc、/var 和 /home 当成原系统文件,必须先确认实际磁盘和分区。
识别磁盘、分区、RAID 和 LVM
在救援终端中先执行只读检查,记录设备名称、型号、容量、序列号、文件系统和挂载关系。
lsblk -e7 -o NAME,PATH,SIZE,TYPE,FSTYPE,UUID,PARTUUID,MOUNTPOINTS,MODEL,SERIAL
blkid
findmnt
cat /proc/mdstat
如果服务器使用软件 RAID、LVM 或其他卷管理方式,还要分别查看其状态。以下命令只用于读取信息,不要在未确认阵列结构前执行创建、清零或初始化操作。
mdadm --detail --scan 2>/dev/null || true
pvs 2>/dev/null || true
vgs 2>/dev/null || true
lvs -a -o +devices 2>/dev/null || true
需要特别警惕以下情况:
/dev/sda、/dev/vda、/dev/nvme0n1等设备名称不能凭经验判断,重启或控制器枚举顺序可能改变。- RAID 成员盘、LVM 物理卷和逻辑卷不能直接当作普通分区挂载。
- 数据盘可能没有挂载点,但不代表里面没有数据。
- 系统可能安装在 NVMe 盘上,而业务数据位于 SATA 盘或 RAID 阵列中。
- UEFI 启动通常需要 EFI 系统分区,传统 BIOS 和 UEFI 的重装分区方案不能混用。
记录当前启动方式和网络信息:
test -d /sys/firmware/efi && echo "UEFI" || echo "Legacy BIOS"
efibootmgr -v 2>/dev/null || true
ip -br address
ip route
cat /etc/resolv.conf
救援环境中的网络地址、网关和 DNS 可能与正式系统不同。需要从服务商控制台、原系统配置或变更记录中确认正式系统的公网地址、网关、VLAN、绑定地址和防火墙策略,不能直接照抄救援环境的网络配置。
建立重装前的核对表
在执行备份前,至少整理以下信息:
| 项目 | 需要确认的内容 | 失败时的处理 |
|---|---|---|
| 系统盘 | 型号、容量、序列号、分区表类型 | 无法唯一确认时停止重装 |
| 数据盘 | 是否独立、是否为 RAID/LVM、挂载点 | 先完成结构记录和备份 |
| 业务数据 | 文件目录、数据库、上传目录、日志保留要求 | 找到责任人确认数据范围 |
| 配置数据 | 网络、SSH、Web、数据库、定时任务、证书和密钥 | 单独导出并限制权限 |
| 备份位置 | 独立服务器、对象存储或外接存储 | 不得只保存在待重装磁盘上 |
| 回滚方式 | 原盘保留、磁盘镜像、文件级恢复或备用盘切换 | 无可执行路径时不进入擦除阶段 |
| 验证方式 | SSH、端口、接口、数据库读写和外部探测 | 预先准备测试账号和检查脚本 |
变更准备:备份应同时满足完整性和可恢复性
先确定备份策略
系统重装通常需要三类备份:
- 业务数据备份:网站文件、上传内容、用户数据、媒体文件、脚本和持久化卷。
- 应用和系统配置备份:
/etc中的配置、Systemd 单元、定时任务、证书、SSH 配置、应用环境变量和安装清单。 - 回滚级备份:分区表、引导信息,必要时制作系统盘完整镜像。
文件级备份适合在新系统中恢复业务数据和配置,但不能直接把旧系统恢复成可启动状态。若要求在重装失败后快速回到原状态,应保留原系统盘、制作可验证的整盘镜像,或准备一块能够承载旧系统的备用盘。仅有 /home 或 /var/www 的复制件,不等于具备完整回滚能力。
处理数据库和写入一致性
文件复制只能保证复制时看到的文件状态,不能自动保证数据库事务一致。理想顺序是:
- 在进入救援模式前,使用数据库对应版本的工具完成逻辑备份。
- 停止数据库和应用写入,确认服务已经退出。
- 记录数据库版本、字符集、扩展、实例目录和启动参数。
- 进入救援模式后,以只读方式检查和复制数据库目录。
- 重装后先在隔离或维护状态下恢复数据库,再进行应用连接测试。
如果已经处于救援模式,无法再执行逻辑导出,不要把正在使用的数据库目录当成普通文件夹随意覆盖。应至少保留完整数据目录、事务日志和数据库配置,并在恢复时使用相同或兼容的大版本进行受控启动。对于数据库文件的修复、强制恢复和降级操作,应依据对应数据库的官方工具和版本规则执行。
围绕独立服务器重装后的数据承载与业务恢复,A5数据提供中国香港、日本、美国等地区的物理服务器资源,涵盖常规计算与存储型配置。香港存储系列配备多块企业级机械硬盘,日本部分方案提供大容量HDD,可作为企业构建独立备份存储的硬件基础;搭配不同地区的服务器资源,也能承载重装后的业务系统、数据库与文件服务。
准备独立的备份位置
备份目标不能是待重装的系统盘,也不应与源数据处于同一个物理故障域。可以使用独立备份服务器、临时挂载的存储或合规的对象存储。备份账号应使用最小权限,传输过程使用加密连接,不要把密码直接写在命令行中。
如果使用 SSH 传输,先测试连通性、磁盘空间和目标权限:
ssh backupuser@backup.example 'hostname; df -h /srv/backup; mkdir -p /srv/backup/server-a'
备份容量至少要覆盖实际数据量、文件系统元数据和临时空间。若源数据约为 800 GB,备份链路有效速率按 200 Mbps 估算,纯传输时间为:
800 GB × 8 × 1000 ÷ 200 Mbps = 32000 秒,约 8.9 小时
这里使用十进制 GB 和 Mbps,实际还会受到磁盘读取速度、文件数量、压缩、校验和网络协议开销影响,因此应预留更长的维护窗口。不要把链路标称 1 Gbps 直接当成实际备份速率。
分步实施:先复制和验证,再执行破坏性操作
第一步:以只读方式挂载原系统
根据前面的 lsblk、blkid 和 LVM/RAID 信息,确认根分区后再挂载。示例中的设备路径必须替换为已经核对过的实际路径。
mkdir -p /mnt/oldroot
ROOT_DEV="/dev/mapper/已确认的根逻辑卷"
mount -o ro "$ROOT_DEV" /mnt/oldroot
findmnt /mnt/oldroot
ls -la /mnt/oldroot
如果原系统使用独立的 /boot、/boot/efi、/home 或数据分区,应分别识别和挂载到临时目录。不要在未知文件系统上直接执行 fsck -y,也不要为了“修复启动”先进行自动修复。文件系统检查和修复会改变磁盘内容,应在备份方案确认后、依据文件系统类型和维护窗口单独安排。
如果发现源文件系统无法挂载、出现 I/O 错误、RAID 降级或 SMART 错误,应先保护现场并保存诊断信息:
dmesg -T | tail -n 100
journalctl -k -n 100 --no-pager 2>/dev/null || true
这类情况不宜直接重装,因为重装可能掩盖硬件故障并增加后续恢复难度。
第二步:复制文件和配置
对于 Linux 文件级备份,可以使用 rsync 保留权限、ACL、扩展属性、硬链接和稀疏文件。下面的示例将根文件系统复制到独立备份服务器,并排除救援环境中的伪文件系统。--one-file-system 会避免跨入单独挂载的分区,因此数据盘需要单独复制。
rsync -aHAXS --numeric-ids --one-file-system --info=progress2 \
--exclude='/proc/***' \
--exclude='/sys/***' \
--exclude='/dev/***' \
--exclude='/run/***' \
--exclude='/tmp/***' \
--exclude='/mnt/***' \
--exclude='/media/***' \
--exclude='/lost+found/***' \
/mnt/oldroot/ \
backupuser@backup.example:/srv/backup/server-a/rootfs/
如果业务数据位于单独分区,先挂载到例如 /mnt/olddata,再单独备份:
mkdir -p /mnt/olddata
DATA_DEV="/dev/已确认的数据分区或逻辑卷"
mount -o ro "$DATA_DEV" /mnt/olddata
rsync -aHAXS --numeric-ids --info=progress2 \
/mnt/olddata/ \
backupuser@backup.example:/srv/backup/server-a/data/
复制完成后,重点检查以下内容是否存在:
/etc/fstab、网络配置、SSH 配置和主机密钥。- Web 服务、反向代理、应用服务和 Systemd 单元。
/var/lib下的数据库、队列、缓存和容器持久化目录。/var/www、/srv、/opt、/home等业务目录。- TLS 证书、私钥、应用密钥和环境变量文件。
- Root 和业务账号的定时任务、日志轮转配置以及监控代理配置。
- 数据库版本、扩展列表、实例参数和备份记录。
配置文件中可能包含密码、令牌和私钥,备份目录必须限制访问权限,并根据组织要求加密和设置保留周期。
第三步:保存磁盘布局和引导信息
如果需要后续重建相同分区布局,保存分区表、卷组配置和引导信息。以下命令只读取本地结构并导出文件,设备路径仍需先确认。
mkdir -p /mnt/oldroot/var/tmp/layout
lsblk -f > /mnt/oldroot/var/tmp/layout/lsblk.txt
blkid > /mnt/oldroot/var/tmp/layout/blkid.txt
cat /proc/mdstat > /mnt/oldroot/var/tmp/layout/mdstat.txt
mdadm --detail --scan > /mnt/oldroot/var/tmp/layout/mdadm-scan.txt 2>/dev/null || true
pvs > /mnt/oldroot/var/tmp/layout/pvs.txt 2>/dev/null || true
vgs > /mnt/oldroot/var/tmp/layout/vgs.txt 2>/dev/null || true
lvs -a -o +devices > /mnt/oldroot/var/tmp/layout/lvs.txt 2>/dev/null || true
对于 GPT 磁盘,可额外导出分区表。不要把示例设备路径直接复制到生产环境:
sgdisk --backup=/mnt/oldroot/var/tmp/layout/system-disk.gpt /dev/已确认的系统磁盘
sfdisk --dump /dev/已确认的系统磁盘 \
> /mnt/oldroot/var/tmp/layout/system-disk.sfdisk
如果使用 UEFI,还应保存 EFI 分区中的启动文件和 efibootmgr -v 输出。引导信息只能帮助重建,不能替代完整系统镜像。
第四步:生成校验信息并进行恢复演练式检查
备份完成后,不能只看 rsync 返回成功。先检查目标目录的大小、文件数量和关键路径:
ssh backupuser@backup.example '
cd /srv/backup/server-a &&
du -sh rootfs data &&
find rootfs -type f | wc -l &&
find data -type f | wc -l &&
test -f rootfs/etc/fstab &&
test -d data
'
对于数据量可控的备份,可以在备份服务器生成 SHA-256 清单:
ssh backupuser@backup.example '
cd /srv/backup/server-a &&
find rootfs data -type f -print0 |
xargs -0 sha256sum > manifest.sha256
'
随后抽样或全量验证:
ssh backupuser@backup.example '
cd /srv/backup/server-a &&
sha256sum -c manifest.sha256
'
大规模文件备份的全量校验可能耗时较长,应把它纳入变更窗口。如果备份目标文件系统不支持 ACL 或扩展属性,rsync 可能出现警告;这些警告不能忽略,应判断目标是否适合承载该备份,必要时改用支持相关元数据的文件系统或归档格式。
重装阶段:将擦除操作作为单独的放行点
执行最终放行检查
在安装器中删除分区、格式化或选择“使用整块磁盘”之前,暂停一次并重新核对:
- 当前选择的磁盘型号、容量和序列号与变更单一致。
- 备份目录可以访问,关键文件能够读取,校验结果符合预期。
- 数据盘、RAID 成员盘和备份盘没有被选为安装目标。
- 已保存正式网络参数、远程控制台入口和紧急联系人。
- 已记录旧系统版本、数据库版本和应用启动顺序。
- 已明确失败后的回滚方式,而不是只计划“重新安装一次”。
只要磁盘身份、备份完整性或回滚路径存在疑问,就应停止在此阶段。不要在未确认设备的情况下执行 wipefs、dd、sgdisk --zap-all、格式化或批量删除命令。
选择与原环境一致的安装参数
重装时重点保持以下边界:
- 按记录选择 UEFI 或传统 BIOS,不要让启动方式在安装过程中发生变化。
- 只对确认过的系统盘重新分区,数据盘选择保留或暂不处理。
- 记录根分区、交换空间、EFI 分区和数据分区的容量与文件系统。
- 使用与硬件、网卡和远程管理控制台兼容的内核及驱动。
- 安装完成后先配置最小网络、SSH 和时间同步,不要同时进行大量应用升级。
- 如果业务依赖固定 IP、网关、MTU 或 VLAN,按原记录配置并从外部验证。
不同服务商的救援模式和安装器操作界面差异较大,不能把某个平台的磁盘编号、网卡名或安装选项直接套用到另一台服务器。安装器显示的磁盘容量和型号应再次与救援环境记录比对。
恢复与验证:按从底层到业务的顺序推进
第一层:验证系统和网络
首次启动后,先验证基础状态,不要立即恢复全部业务。
hostnamectl
uname -a
lsblk -f
findmnt
df -hT
ip -br address
ip route
systemctl --failed
journalctl -p err -b --no-pager
检查项包括:
- 是否从预期磁盘启动,EFI 分区和根分区是否正确。
- 数据盘是否以预期 UUID、标签和挂载点出现。
- 文件系统容量和 inode 是否足够。
- SSH 是否能从管理网和业务允许的来源访问。
- DNS、默认路由、时间同步和主机名是否符合原环境。
- 内核日志是否出现磁盘、网卡、文件系统或 RAID 错误。
不要为了快速恢复而直接覆盖整个 /etc。新系统的发行版版本、软件包路径和服务配置可能不同,应按文件和服务逐项迁移。证书私钥、SSH 主机密钥等敏感文件恢复后,应检查所有者和权限,避免以普通用户可读的方式暴露。
第二层:恢复数据到暂存目录
先把备份恢复到暂存路径,完成文件数量、权限和关键内容检查后,再切换到正式路径。示例:
mkdir -p /srv/restore-staging
rsync -aHAXS --numeric-ids --info=progress2 \
backupuser@backup.example:/srv/backup/server-a/data/ \
/srv/restore-staging/
确认无误后,再按业务目录迁移。不要把旧系统的整个 /etc 或 /var 无条件覆盖到新系统。数据库目录尤其应先安装兼容版本、停止服务、确认数据目录为空或已备份,再按照数据库恢复流程执行。
Web 服务配置恢复后,可以先做语法检查。例如服务器确实安装了 Nginx 时:
nginx -t
systemctl status nginx --no-pager
如果没有安装 Nginx,不应执行该命令;其他 Web 服务和数据库也应使用其对应版本的检查工具。服务启动顺序通常应为:网络和存储、数据库或队列、应用服务、Web 入口、监控和定时任务。
第三层:执行业务验收
业务验收至少应覆盖:
- 外部 DNS 或负载均衡是否指向正确地址。
- TCP 端口和 TLS 证书是否正常。
- 登录、查询、写入、上传、下载等关键流程。
- 数据库读写、队列消费、定时任务和异步回调。
- 日志是否持续产生,错误率和响应时间是否异常。
- 备份任务和监控告警是否恢复。
- 磁盘、内存、CPU、文件描述符和连接数是否处于合理范围。
“能 SSH 登录”只能证明系统基础可用,不能证明重装成功。至少应安排一次由业务负责人执行的核心流程验收,并保留命令输出、监控截图或测试记录。
观察窗口与回滚触发条件
变更过程中的停止条件
以下任一情况出现,都应暂停后续操作,而不是继续尝试:
- 备份任务中断,且无法确认中断前数据是否完整。
- 校验失败、文件数量明显不符或关键目录缺失。
- 发现源盘存在 I/O 错误、RAID 降级或无法读取的扇区。
- 安装器识别出的目标磁盘与变更记录不一致。
- 数据盘被误识别为安装目标。
- 远程控制台、带外管理或救援入口不可用。
- 正式网络参数、数据库版本或业务恢复顺序没有确认。
- 维护窗口不足以完成恢复和验收。
重装后的回滚路径
回滚方式取决于重装前准备的备份类型:
| 回滚条件 | 优先路径 | 边界 |
|---|---|---|
| 尚未擦除旧系统 | 退出安装器,保留原盘并恢复原启动项 | 不要继续修改原盘 |
| 使用备用盘完成新系统安装 | 切回旧盘或调整启动顺序 | 需确认旧盘仍可启动 |
| 有经过验证的整盘镜像 | 将镜像恢复到原磁盘,再恢复引导和网络 | 会覆盖目标盘,必须再次核对设备 |
| 只有文件级备份 | 重建兼容系统并恢复数据、配置和数据库 | 不能视为即时回滚,恢复时间更长 |
| 硬件或磁盘出现错误 | 停止写入,保留现场并更换故障部件 | 不应反复格式化或强制修复 |
如果业务要求较短的恢复时间,推荐在条件允许时将新系统安装到备用盘,先完成启动和业务验证,再切换启动盘或业务入口。这样比在原盘上直接擦除后依赖文件备份恢复具有更清晰的回退边界。
设置观察窗口和触发阈值
重装完成后,不要在第一次健康检查通过就立即关闭变更。可以按业务特征安排观察窗口:
- 基础技术观察:至少 30 至 60 分钟,覆盖重启、网络、磁盘和服务状态。
- 低流量业务观察:通常安排 2 至 4 小时,覆盖登录、读写、日志和监控。
- 有批处理、结算或夜间任务的系统:观察窗口应覆盖一次关键任务周期。
以下情况可作为回滚触发条件:
- 服务器连续无法启动,或重启后无法恢复 SSH 和带外入口。
- 核心业务接口持续失败,数据读写出现错误或结果不一致。
- 数据库无法正常恢复、表空间损坏或事务日志无法衔接。
- 磁盘、RAID、文件系统持续报错,且错误不是单次历史日志。
- 关键监控指标连续超出原有基线,并且确认与重装相关。
- 证书、密钥、权限或网络策略错误导致业务无法安全提供服务。
- 在约定观察窗口内无法完成核心验收,且继续运行会扩大数据风险。
回滚触发后,先停止应用写入并保留日志、监控和错误现场,再按照预先确认的备用盘、整盘镜像或兼容系统恢复路径执行。不要在故障状态下直接覆盖备份,也不要为了“先恢复服务”跳过数据库一致性检查。只有当基础系统、数据完整性、业务功能和监控状态均通过验收,并且观察窗口内没有触发条件,才应正式关闭本次重装变更。
本文由A5数据原创发布,转载请注明出处:https://www.a5idc.com/helpcontent/5171.html



