美国服务器之间如何用Linux工具同步文件,并检查权限与传输结果
已有两台美国 Linux 服务器需要互相或单向同步文件时,日常维护通常不需要重新部署整套服务:确认两端的 SSH、rsync、目录挂载和账号权限可用,再先做一次不传输的差异检查,最后执行同步并核对退出状态、文件属性和抽样内容。这样既能处理网站资源、备份文件和发布包,也能避免把目标机上不应删除的文件误当成源端数据。
本文以源服务器 us-a 向目标服务器 us-b 同步 /srv/app/data/ 为例。两台机器均为常见的 Debian、Ubuntu、Rocky Linux 或 AlmaLinux 环境,使用普通运维账号通过 SSH 登录;命令中的主机名、端口、用户和路径需要替换为实际值。同步方向必须明确,反向执行同一命令可能造成覆盖,因此每次操作前都应再次确认源端和目标端。

A5idc数据提供美国物理服务器资源,覆盖常规Xeon、AMD EPYC、NVMe存储及多IP配置,并配备CN2 GIA等线路方案,可为网站、业务后台、数据库和跨境文件同步提供源端与目标端的硬件基础。针对数据量较大或需要长期保留的同步场景,美国AMD系列和大容量NVMe方案也能承载持续的数据读写与多任务运行。
现状与条件确认
先确认工具、系统和挂载点
在两端分别执行以下命令,先确定当前环境,而不是根据发行版名称猜测命令或路径:
cat /etc/os-release
command -v ssh
command -v rsync
id
hostname -f
df -hT /srv/app/data/
df -ih /srv/app/data/
rsync 缺失时,只补齐当前维护任务所需的软件,不必借此重做整机部署。Debian 或 Ubuntu 通常使用 sudo apt-get install rsync openssh-client,RHEL 系列通常使用 sudo dnf install rsync openssh-clients;目标端还需要提供 SSH 服务端和 rsync 接收端。安装前应按现场的软件源和变更流程执行,不能把示例命令直接用于禁止变更的生产窗口。
检查目标端对应目录是否真的挂载在预期磁盘上:
findmnt -T /srv/app/data/
ls -ld /srv/app /srv/app/data
stat -c '%A %a %U:%G %u:%g %n' /srv/app/data
如果 findmnt 没有输出,目录可能只是根分区下的普通目录。此时不要直接同步大批数据,应先确认挂载是否丢失;否则数据可能写入根分区,造成根分区空间耗尽。df -h 查看容量,df -ih 查看 inode,二者都要有余量。
统一同步边界和账号
先明确以下事项:
- 源端是
us-a,目标端是us-b,还是反向同步; - 同步的是目录内容、单个文件,还是只同步某些后缀;
- 目标端已有文件是保留、覆盖,还是必须与源端完全镜像;
- 应用是否正在写入这些文件;
- 是否需要保留属主、属组、权限、软链接、硬链接、ACL 和扩展属性。
示例中的尾部斜杠有实际含义。/srv/app/data/ 表示把 data 目录中的内容放入目标目录;写成 /srv/app/data 时,可能在目标端形成额外的 data 目录。首次操作应使用明确的绝对路径,避免当前工作目录变化带来误传。
先用非 root 账号测试 SSH,不要为了省事开放 root 远程登录:
ssh -o BatchMode=yes -o ConnectTimeout=10 syncuser@us-b 'hostname -f && command -v rsync && test -x /srv/app/data'
命令返回目标主机名、rsync 路径且退出码为 0,说明 SSH 密钥、目标账号和目录搜索权限至少满足基本条件。若 SSH 使用非标准端口或指定密钥,应统一写入 SSH 配置或在 rsync 的 -e 参数中明确指定,例如 -e 'ssh -p 2222 -i /home/ops/.ssh/sync_ed25519'。密钥文件应限制为账号本人可读,不能把密码写进脚本或命令行。
先核对目录和数据规模
同步前在源端记录文件量、容量和关键文件属性:
find /srv/app/data -xdev -type f | wc -l
du -sh /srv/app/data
du -sb /srv/app/data
stat -c '%A %a %U:%G %u:%g %s %y %n' /srv/app/data/important.conf
du -sb 使用字节统计,适合与目标端做数量级核对;du -sh 是便于阅读的显示值。文件量很大时,find 可能需要较长时间,不能把命令无输出误判为卡死。应用配置、上传目录和日志目录的同步边界通常不同,应分别确认,尤其不能把临时目录、缓存目录和运行时 socket 一并复制。
日常文件同步操作
先做 SSH 和 rsync 试运行
准备变量可以减少手工输入错误。以下示例使用 Bash,并且不启用删除:

SRC=/srv/app/data/
DST=syncuser@us-b:/srv/app/data/
LOG=/var/log/rsync-data-$(date +%F-%H%M%S).log
rsync -aHn --partial --human-readable --itemized-changes \
-e 'ssh -o BatchMode=yes -o ConnectTimeout=10' \
"$SRC" "$DST" 2>&1 | tee "$LOG"
-n 或 --dry-run 只计算将要执行的动作,不会写入目标端;-a 保留常见的递归、权限、时间、属主、属组、软链接和设备属性;-H 用于保留硬链接关系,但会增加扫描开销;--partial 允许中断传输后保留部分文件,以便后续继续。--itemized-changes 会列出新增、更新和属性变化。
试运行输出为空,只能说明在当前 rsync 规则下没有检测到需要处理的变化,不代表已经完成内容校验。默认主要依据文件大小和修改时间判断,后文会说明何时使用校验和。
执行普通增量同步
确认试运行清单只包含预期文件后,执行实际传输:
set -o pipefail
rsync -aH --partial --human-readable --info=progress2,stats2 \
-e 'ssh -o BatchMode=yes -o ConnectTimeout=10' \
"$SRC" "$DST" 2>&1 | tee "$LOG"
rc=${PIPESTATUS[0]}
printf 'rsync exit code: %s\n' "$rc"
exit "$rc"
--partial 不等于可以安全复制正在变化的数据库文件或日志文件。对于持续写入的文件,应在应用短暂停写、生成静态导出或切换到备份文件后同步。对普通静态资源,rsync 会只传输新增或变化部分;对大文件,网络中断后保留的临时文件通常可以减少重复传输。
压缩选项 -z 适合文本、配置和未压缩日志,但对已经压缩的图片、视频、归档包通常收益有限,还会增加 CPU 消耗。若两台美国服务器之间链路带宽充足、CPU 紧张,可以不加 -z;若链路带宽是瓶颈,可在试运行和小批量文件上验证后使用 -azH。美国服务器的地理位置不会改变 rsync 的权限语义,实际耗时仍取决于往返延迟、可用带宽、磁盘读写和文件数量。
例如待传输数据约为十进制 20 GB,链路有效速率按 200 Mbps 粗略估算,理论传输时间为 20 × 8 × 1000 ÷ 200 = 800 秒,约 13.3 分钟。这里的 GB 按十进制计算,Mbps 是兆比特每秒;握手、协议开销、磁盘速度和并发小文件会使实际时间更长,这只是排期参考,不是链路实测结果。
只有确认镜像需求后才使用删除
普通增量同步不会删除目标端多余文件。如果目标端必须严格与源端一致,才考虑 --delete,并且先进行至少一次带 --delete 的试运行:
rsync -aHn --delete --itemized-changes \
-e 'ssh -o BatchMode=yes -o ConnectTimeout=10' \
"$SRC" "$DST"
输出中的删除项必须逐条确认。--delete 的影响范围是目标目录:目标端存在而源端不存在的文件可能被删除,误把源端路径写错时也可能造成大范围误删。目标端如有人工上传文件、缓存或独立生成的数据,不应使用该选项;应改为明确的 --files-from 清单或单独目录。
需要可恢复的镜像变更时,可以在目标端预留独立备份目录,并在低峰期执行:
rsync -aH --delete --backup \
--backup-dir=/srv/app/.rsync-backup-2025-01-15-2300 \
-e 'ssh -o BatchMode=yes' \
"$SRC" "$DST"
备份目录必须位于空间充足、不会被下一次同步再次纳入源目录的位置;时间戳仅为示例,应换成实际变更批次。该方式只保存被替换或删除的目标端文件,不等同于完整快照,仍应保留正式备份或云盘快照。
权限与属性检查
判断 rsync 实际能保留什么
-a 包含权限、修改时间、属主、属组、软链接和设备文件等常用属性,但能否真正保留取决于执行账号和文件系统。普通账号通常不能把目标文件属主改成其他用户;目标端文件可能最终归 syncuser 所有,即使源端文件属于应用账号。若服务依赖固定 UID/GID,先在两端核对:
id appuser
getent passwd appuser
getent group appgroup
不要只看用户名,因为两端同名用户的数字 UID 仍可能不同。需要按数字 UID/GID 保留时,可在确认两端账号映射一致后使用 --numeric-ids。需要保留 ACL 或扩展属性时,在两端确认文件系统和权限支持后再增加 -A -X;这些参数会增加权限要求和传输内容,不能默认套用到所有目录。
如果确实需要目标端由 root 接收文件,应采用经过审批的受限 sudo 配置,并测试非交互执行:
ssh syncuser@us-b 'sudo -n rsync --version'
只有该命令在无需输入密码时成功,才可在 rsync 中使用 --rsync-path='sudo -n rsync'。不要把普通账号直接改成全量免密 sudo,也不要在不清楚目标目录的情况下使用 root 运行带 --delete 的命令。
检查目录搜索权和服务账号访问权
目录读取不只取决于文件本身,路径上的每一级目录都需要执行权限。使用 namei 查看路径链:

namei -l /srv/app/data/important.conf
ls -ld /srv /srv/app /srv/app/data
如果系统安装了 ACL 工具,再查看有效 ACL:
getfacl -p /srv/app/data/important.conf
同步完成后,应以实际运行服务的账号做读写测试,而不是只用管理员账号测试:
sudo -u appuser test -r /srv/app/data/important.conf
sudo -u appuser test -w /srv/app/data
sudo -u appuser test -x /srv/app/data
目录的 r 允许列出名称,x 允许进入或访问路径,w 才允许创建、删除或改名。文件可读不代表应用能访问完整路径;目录缺少 x 权限时,服务仍会报权限拒绝。若同步任务只需要读取源端,不要额外给同步账号写权限。
结果检查与验收
先看退出码和统计信息
常见 rsync 结果可按以下方式判断:
| 退出码 | 常见含义 | 处理方向 |
|---|---|---|
| 0 | 传输和属性处理完成 | 继续做目标端抽查和差异复核 |
| 1 | 命令行或参数错误 | 检查路径、选项和 rsync 版本 |
| 5、10、12 | 启动、网络或协议连接问题 | 先检查 SSH、端口、防火墙和两端 rsync |
| 23 | 部分文件或属性未传输 | 查看日志中的具体路径,区分权限、空间和变化文件 |
| 24 | 源文件在扫描期间消失 | 确认是否为临时文件或并发写入,必要时重跑 |
| 30 | 传输超时 | 检查链路、空闲超时和磁盘响应 |
退出码不为 0 时不要只看“传输了多少字节”就宣布成功。--stats 输出的文件数、总大小、已跳过文件和速度应与本次范围相符;日志要保存到可访问的位置,避免写满系统分区。
用再次试运行确认差异
普通文件的日常验收可以再次执行不带删除的 dry-run:
rsync -aHn --itemized-changes \
-e 'ssh -o BatchMode=yes' \
"$SRC" "$DST"
没有输出通常表示文件大小、修改时间及所选属性已对齐。如果源端和目标端的时间戳可能被应用重写,或曾经发生内容被改回相同大小和时间的情况,应使用校验和进行一次更严格的核对:
rsync -aHnc --itemized-changes \
-e 'ssh -o BatchMode=yes' \
"$SRC" "$DST"
-c 会读取并比较文件内容,磁盘读取量和耗时明显增加,不适合每分钟执行。对关键发布包可分别生成 SHA-256 清单;两端目录内文件名不含换行符时,可使用:
cd /srv/app/data && find . -type f -print0 | sort -z | xargs -0 sha256sum > /tmp/data.sha256
sha256sum -c /tmp/data.sha256
清单应在目标端重新生成或复制后核对,且不能把源端清单本身当成目标端内容已经正确的证明。对包含特殊文件名的目录,应使用应用级清单工具或在测试目录先验证处理方式。
最后抽查文件大小、权限、属主和服务读取结果:
ssh syncuser@us-b 'du -sb /srv/app/data && find /srv/app/data -xdev -type f | wc -l'
ssh syncuser@us-b "stat -c '%A %a %U:%G %u:%g %s %y %n' /srv/app/data/important.conf"
ssh syncuser@us-b 'sudo -u appuser test -r /srv/app/data/important.conf'
目标端总字节数和文件数与源端接近只是快速筛查,软链接、稀疏文件、硬链接和排除规则可能使简单统计不同。关键配置还应由应用执行一次只读加载或健康检查,确认不仅文件存在,权限和格式也可用。
异常处理与必要恢复
SSH 连接失败
先从外到内排查,不要立即修改防火墙:

getent hosts us-b
ssh -vv -o ConnectTimeout=10 syncuser@us-b 'true'
名称解析失败说明主机名或 DNS 有问题;连接超时应检查目标端监听地址、端口、云防火墙和主机防火墙;能连接但认证失败则检查账号、密钥权限、authorized_keys 和 SSH 配置。-vv 日志可以定位阶段,但不要把私钥内容或完整敏感日志公开到工单之外。
权限拒绝、属主变化或 ACL 丢失
先用 namei -l 和 getfacl 定位具体路径,再判断是源端不可读、目标端不可写,还是普通账号无法保留属主。不要直接执行递归 chmod -R 777 或不加范围的 chown -R,这可能让敏感配置暴露,或改变应用运行所需的安全边界。必要的权限修复应先记录原权限,限定到明确目录,并在维护窗口内执行;若修复后应用异常,可根据记录恢复原属主、属组和模式。
磁盘不足、inode 用尽或文件不断变化
分别检查两端的 df -hT、df -ih 和 rsync 日志。释放空间前先确认文件用途,不能把日志、备份或数据库文件直接删除作为同步修复手段。源文件在扫描期间被替换时,使用应用导出、暂停写入或两次同步策略:第一次减少差异,暂停写入后再执行第二次同步,并重新做 dry-run 和校验。
部分传输退出码 23 或中断后,可在确认目标端剩余空间和权限正常后重跑原命令;--partial 会复用部分文件,但不能把未完成文件提供给应用使用。若发现目标端已被错误覆盖,应先停止相关服务或切断其读取路径,保留现场日志,再从正式快照或完整备份恢复。使用 --backup-dir 产生的目录只能恢复被替换或删除的那部分,不能替代完整备份;恢复前应先做临时目录演练,确认目录层级和属主。
完成后的上线或验收检查清单
- [ ] 已确认源端、目标端、方向、绝对路径和尾部斜杠,没有把目标目录误写成源目录。
- [ ] 两端 SSH、rsync、挂载点、容量和 inode 均已检查,目标目录不是意外落在根分区。
- [ ] 已完成不带删除的 dry-run,并确认变更清单符合本次范围。
- [ ] 应用持续写入的文件已暂停写入、导出或采用了明确的二次同步策略。
- [ ] 普通账号权限、目标目录写入权以及服务账号的读写执行权限均已验证。
- [ ] 属主、属组、模式、ACL、扩展属性和软链接等要求已按实际业务逐项确认,没有盲目使用 root 或递归放权。
- [ ] 实际同步退出码为 0,日志和统计信息已保存;非 0 结果已定位到具体文件。
- [ ] 已再次 dry-run;关键数据必要时使用
-c或 SHA-256 清单核验。 - [ ] 若使用
--delete,已有目标端快照、备份目录或可执行的恢复方案,并确认删除清单。 - [ ] 服务账号已能读取或写入同步后的关键路径,应用级健康检查通过,后续批次沿用相同日志和验收标准。
本文由A5数据原创发布,转载请注明出处:https://www.a5idc.com/helpcontent/8069.html



