日本服务器定制RAID 10,交付时如何核对磁盘数量与阵列状态?

发布人:A5数据发布时间:2026-10-15 15:03阅读量:325

日本服务器定制 RAID 10 的交付验收,不能只看面板上是否写着“RAID 10”,也不能只执行 df -h 查看一个逻辑盘。应先把交付单中的磁盘总数拆成 RAID 成员盘、热备盘、系统盘和未加入阵列的盘,再通过阵列控制器或操作系统确认实际成员数量;随后核对阵列级别、活动盘、故障盘、重建状态和可用容量。常见四盘 RAID 10 的正常状态,应表现为 4 块盘参与阵列、没有 Failed 成员、没有进行中的 Rebuild 或 Resync,阵列状态为 Optimal 或 Clean。

需要特别注意硬件 RAID 与软件 RAID 的差异。硬件 RAID 控制器可能只向操作系统呈现一个逻辑盘,lsblk 看到一块盘并不代表服务器实际只有一块物理盘;软件 RAID 通常能在系统中看到成员盘和 /dev/md* 设备。磁盘数量、RAID 状态、网络端口、路由、带宽和稳定性应分别验收,不能用“能开机”或“能访问网站”替代其中任何一项。

一、先把交付配置拆成可核对的对象

1. 先确认“磁盘数量”到底指什么

交付单中常见的“4 块盘 RAID 10”“4×3.84TB RAID 10”“4 块数据盘+1 块热备”并不是同一个口径。验收前应将每一块盘归入明确类别。

对象需要记录的内容验收时的判断
RAID 10 成员盘数量、型号、序列号、单盘容量、所在槽位必须与订单约定一致,并处于 Active、Online 或等效正常状态
热备盘数量、型号、槽位、当前角色热备盘通常不计入当前 Active 成员数量,不能把热备盘当作已参与条带的成员盘
系统盘是否独立于数据阵列、安装位置、容量若订单要求系统盘独立,应确认系统没有误装在 RAID 数据卷上
RAID 控制器厂商、型号、缓存策略、是否带电池或电容保护控制器型号和策略应与交付配置相符
逻辑卷RAID 级别、逻辑盘容量、名称、挂载点操作系统使用的卷应确实建立在目标 RAID 10 逻辑盘上
未加入阵列的磁盘数量、用途、是否预留无用途的裸盘应要求服务商说明,避免把未使用磁盘误算进 RAID 配置

例如,订单写成“6 块 3.84TB SSD,其中 4 块组成 RAID 10,1 块作为热备,1 块作为系统盘”,验收结果应分别对应:

六块无品牌SSD按四块成员盘、一块热备盘、一块独立系统盘分区陈列;仅四块成员盘置于RAID 10边界内,热备和系统盘位于边界外

  • RAID 10 Active 成员:4 块;
  • Hot Spare:1 块;
  • 系统盘:1 块;
  • RAID 10 的可用容量主要按 4 块成员盘计算,而不是按 6 块盘计算。

常见 RAID 10 采用镜像加条带的方式,生产环境中通常以 4 块或更多成员盘构成。若服务商使用特殊控制器布局、双盘 RAID 10 或其他兼容实现,应要求其提供控制器显示的成员关系和容错说明,不能只根据名称接受。

2. 区分 TB、TiB 和逻辑卷容量

硬盘厂商通常以十进制容量标注,操作系统可能以二进制单位显示。以 4 块 3.84TB 磁盘构成常规 RAID 10 为例:

  • 原始容量约为 4 × 3.84TB = 15.36TB;
  • RAID 10 理论可用容量约为原始容量的一半,即 7.68TB;
  • 转换为操作系统常见的 TiB 显示后约为 6.98TiB;
  • RAID 元数据、控制器保留空间、分区和文件系统还会带来少量差异。

因此,订单写“7.68TB RAID 10”,而系统显示约“6.9TiB”并不必然异常。真正需要追问的是:在单位换算合理后,逻辑卷容量仍明显低于预期,或者服务商用 6 块物理盘宣传容量却只有 4 块盘加入阵列。

二、核对物理磁盘数量和成员关系

1. 软件 RAID:同时看物理盘和阵列设备

如果服务器使用 Linux 软件 RAID,应先列出系统识别到的物理磁盘。以下命令只读取设备信息,不会修改阵列:

lsblk -d -o NAME,MODEL,SERIAL,SIZE,ROTA,TYPE
lsblk -o NAME,TYPE,SIZE,FSTYPE,MOUNTPOINTS
cat /proc/mdstat

lsblk -d 适合查看块设备概要,但不能单独作为所有场景下的物理盘清单。需要结合以下关系判断:

  1. TYPE=disk 的设备数量和型号是否符合交付单;
  2. 是否存在 md 类型的阵列设备,例如 /dev/md0;
  3. 文件系统或 LVM 是否建立在 /dev/md0 之上;
  4. 是否有磁盘虽然被系统识别,但并未加入 RAID;
  5. 是否存在只读盘、异常容量盘或序列号与交付记录不一致的盘。

可以用以下命令确认挂载点对应的底层设备:

findmnt
df -hT
lsblk -o NAME,TYPE,SIZE,FSTYPE,MOUNTPOINTS

如果 /data 的路径最终落到 /dev/md0、LVM 逻辑卷或建立在 /dev/md0 上的文件系统,才能进一步确认该业务卷使用了软件 RAID。若业务目录直接挂载在某一块 /dev/sdX 上,则不能把其他磁盘的存在视为业务数据已经受到 RAID 10 保护。

2. 用 mdadm 核对 RAID 10 的实际成员数量

先通过 /proc/mdstat 查看阵列是否正在同步或降级,再使用 mdadm --detail 查看成员数量和状态:

cat /proc/mdstat
mdadm --detail /dev/md0

设备名称不一定是 /dev/md0,应以 cat /proc/mdstat 的实际结果为准。一个正常的四盘 RAID 10,常见的关键字段应接近以下含义:

Raid Level : raid10
Raid Device : 4
Total Devices : 4
Active Devices : 4
Working Devices : 4
Failed Devices : 0
Spare Devices : 0
State : clean

这里的示例只用于说明判断口径,不代表某台服务器的实测结果。重点不是某个字段单独为“4”,而是以下数据要相互一致:

核对项正常判断需要暂停验收的情况
Raid Level显示 raid10 或控制器等效的 RAID 10显示 RAID 1、RAID 0、JBOD 或无法确认
Raid Device与订单约定的成员盘数量一致订单为 4 盘,实际只有 3 个成员
Active Devices等于计划中的在线成员数少于计划数量,或处于降级
Failed Devices为 0存在 Failed、Fault、Offline 等状态
Spare Devices与订单中热备数量一致订单有热备但未识别,或多出未说明的盘
Stateclean、active 或控制器的 Optimaldegraded、recovering、resync、rebuilding

/proc/mdstat 中的成员标记也有直观参考价值。例如四个成员显示为 [UUUU],通常表示四个成员都在线;出现 [U_U_]、[UU_U] 等缺位标记,则表示至少有成员异常或未参与当前阵列。若正在显示 resync、recovery 或百分比进度,即使当前业务可以访问,也不应直接按“最终正常状态”签收。

3. 硬件 RAID:不能只看操作系统里的逻辑盘

使用 Broadcom、LSI 或其他硬件 RAID 控制器时,操作系统可能只看到一个 /dev/sda 或一个 /dev/nvme0n1。这只是逻辑卷,不是物理盘数量。此时应在控制器管理界面、带外管理页面或对应 CLI 中核对:

底层四块物理SSD,中层硬件RAID控制器及RAID 10逻辑卷,上层操作系统中的一个示例设备;控制器侧标出成员核对入口,系统侧标出逻辑设备观察入口

  • 控制器下挂载的 Enclosure、Slot 和物理盘数量;
  • 每块物理盘的型号、序列号、容量和接口类型;
  • Virtual Drive 或 Logical Drive 的 RAID 级别;
  • 当前成员盘数量、热备盘数量和故障盘数量;
  • Logical Drive 是否为 Optimal;
  • 是否存在后台初始化、重建、校验或降级任务。

如果服务器安装了 Broadcom/LSI 系列控制器工具,可根据实际工具版本使用只读查询命令,例如:

storcli /c0 show
storcli /c0/vall show
storcli /c0/eall/sall show

不同厂商可能使用 perccli、ssacli 或厂商专用工具,命令不能混用。未确认控制器型号和工具版本前,不要直接套用网上的写入、清理、初始化或重新配置命令。

硬件 RAID 的合格判断通常是:

  • Virtual Drive 类型为 RAID 10;
  • 状态为 Optimal 或同等正常状态;
  • 物理盘数量与订单一致;
  • 所有成员盘处于 Online;
  • Failed、Missing、Offline 数量为 0;
  • 热备盘角色与交付单一致;
  • 没有正在进行的 Rebuild、Initialization 或 Patrol Read 异常任务。

4. 核对盘位、序列号和容量,而不是只数设备名

盘符可能因控制器、系统安装顺序或重启发生变化,序列号和槽位更适合做交付留证。建议把以下内容保存到验收记录:

  • 服务器编号;
  • 控制器型号;
  • Enclosure/Slot;
  • 磁盘型号;
  • 序列号;
  • 单盘容量;
  • RAID 成员角色;
  • 热备或系统盘角色。

不同容量的磁盘混用时,阵列通常会按较小成员盘的容量使用,超出的空间可能无法利用。若订单约定 4 块同型号 3.84TB SSD,实际出现 3 块 3.84TB 加 1 块 1.92TB,即使 RAID 状态显示正常,也应先确认容量和性能是否符合订单。

三、确认阵列状态不仅是“能读写”

1. 检查是否存在降级、重建和潜在故障

RAID 10 的验收重点是当前状态和成员关系,而不是只做一次目录读写。建议查看内核日志和阵列事件:

journalctl -k --since "30 min ago"
journalctl -k -p warning..alert --since "30 min ago"

重点留意以下关键词或同等含义的事件:

  • I/O error
  • ata error
  • link reset
  • offline
  • failed
  • degraded
  • medium error
  • controller reset
  • uncorrectable

如果服务商刚完成阵列重建,交付时可能暂时处于 rebuilding 或 resync 状态。此时应让服务商说明原因、预计完成条件和重建前后的成员关系。重建完成后再重新检查一次阵列状态,不能用“正在自动修复”替代正常交付。

2. 检查硬盘健康信息时要匹配控制器类型

直通模式或软件 RAID 下,可以对单盘执行只读健康查询:

smartctl --scan-open
smartctl -a /dev/sda

实际设备名应以扫描结果为准。硬件 RAID 下直接对 /dev/sda 执行 SMART 查询,可能只读到逻辑盘信息,甚至返回不完整结果。此时应通过 RAID 控制器工具读取物理盘健康状态,或依据控制器支持的设备类型使用对应参数。

验收时不必把某一个温度或通电小时数直接当成不合格条件,但以下情况值得要求解释:

  • 新交付磁盘出现明显的介质错误;
  • SMART 中有待处理或不可校正扇区;
  • 控制器报告介质错误、预测故障或寿命告警;
  • 同一磁盘出现多次链路重置;
  • 盘的序列号、型号与交付记录不一致。

不要为了“验证 RAID 能否容错”而直接拔盘、强制下线成员或执行重建测试。此类操作会改变阵列状态并增加业务风险。若确实需要做容错演练,应先完成备份或快照,明确影响范围、操作窗口、恢复步骤和回滚方式,并由服务商或运维人员执行。

3. 理解 RAID 10 的故障边界

RAID 10 通常可以在每个镜像组各损坏一块盘时继续运行,但并不意味着任意两块盘同时损坏都不会丢失数据。如果两块故障盘恰好属于同一个镜像组,阵列仍可能无法正常工作。

左右使用完全相同的四盘、两镜像组布局;左侧每组各一块故障,右侧同一组两块故障,以剩余副本是否存在解释结果

因此,交付记录至少应保留:

  • 镜像组或控制器显示的成员关系;
  • 当前在线盘和热备盘;
  • 控制器缓存保护状态;
  • 阵列告警和重建记录;
  • 数据备份位置。

RAID 10 解决的是磁盘故障后的可用性问题,不等于独立备份。验收时发现阵列正常,也不能删掉已有备份策略。

A5数据的日本物理服务器覆盖业务计算、数据存储与网络接入需求:热销系列提供Xeon Gold、AMD EPYC平台及NVMe存储,为数据库、业务后台和接口服务提供硬件基础;日本CTG系列提供SSD、大容量HDD等存储方案,支持文件存储与归档场景,并提供CIA、GIA、CN2和SoftBank等线路选择,为日本本地及跨境业务提供不同的网络资源组合。

四、核对网络端口和链路速率

1. 区分物理端口、逻辑接口和管理接口

交付单写“2×10Gbps”时,应明确它指的是两 个物理网口、一个双口网卡、两个独立带宽端口,还是一个聚合后的逻辑接口。Linux 中的 bond0、br0、VLAN 和容器虚拟网卡都不是额外的物理端口。

可以先查看接口概况:

ip -br link
ip -br addr

再对交付单中对应的物理接口查询协商状态:

ethtool eno1
ethtool eno2

如果系统接口名不是 eno1、eno2,应替换成实际物理接口名称。重点核对以下字段:

核对项判断依据
接口数量物理接口数量与订单一致,不把 bond、bridge、VLAN 计为物理口
Link detected应为 yes,否则检查网线、光模块、交换机端口或服务开通状态
Speed与端口规格和交付口径一致,例如 1000Mb/s、10000Mb/s
Duplex以全双工为正常参考,半双工通常需要排查
MAC 地址与服务商记录、机房配线或交付单可对应
接口角色业务口、管理口、备份口和未使用端口应有明确说明

“网卡支持 10Gbps”“端口协商为 10Gbps”“实际业务可获得 10Gbps”是三个不同结论。若网卡能力为 10Gbps,但当前 Speed 只有 1Gbps,不能按 10Gbps 端口验收;若协商速率为 10Gbps,但合同带宽为 200Mbps,也不能按 10Gbps 独享带宽理解。

2. 检查端口错误和链路抖动

链路状态可以用接口统计和网卡统计辅助判断:

ip -s link show eno1
ethtool -S eno1

ethtool -S 的统计字段因网卡厂商不同而变化,重点关注 CRC、symbol、alignment、drop、carrier、link down 等错误或变化计数。单次计数不一定说明当前故障,应在验收窗口开始和结束时各保存一次,观察是否持续增长。

如果一条物理链路被加入 bond,还要查看 bond 的成员状态:

cat /proc/net/bonding/bond0

若订单只要求两个独立业务端口,却实际配置成一个 bond,应确认聚合模式、交换机侧配置、带宽口径和故障切换方式,否则很容易把逻辑聚合误认为两个独立出口。

五、核对路由是否与交付网络一致

1. 检查地址、网关和默认路由

服务器本地应确认 IPv4、IPv6 是否按订单开通,默认网关是否正确,业务出口是否使用预期源地址:

ip -4 addr
ip -6 addr
ip -4 route
ip -6 route
ip route get 1.1.1.1

最后一条命令用于查看系统访问指定目标时选择的出口接口、下一跳和源地址。实际验收时,建议将 1.1.1.1 替换为服务商提供的测试目标或业务侧允许访问的地址。

路由核对项判断依据
默认网关与交付网段匹配,能够从业务接口到达
出口接口流量从合同约定的业务端口发出,而不是管理口或备用口
源地址选择的源 IP 属于交付给该服务器的业务地址
IPv6 路由若订单包含 IPv6,应有对应地址、网关和默认路由
多默认路由存在多条默认路由时,必须有明确优先级和用途
特定业务路由业务网段、备份网段或内网网段不应误走公网出口

服务器上看到的出站路由,不能完全代替用户侧到日本机房的访问路径检查。若业务用户主要来自中国大陆、东南亚或其他地区,应从实际业务网络对服务器公网地址进行连通性和路径观察。路径中出现运营商互联、国际链路或中间节点变化,不应直接归咎于服务器本身,但如果出现持续丢包、绕行严重或路由与服务商承诺的线路类型不符,应提交服务商复核。

2. 不要用一次 ping 代替路由验收

可以先测试本地网关,再测试服务商指定目标:

ping -c 100 192.0.2.1
ping -c 100 1.1.1.1

其中 192.0.2.1 仅作为文档示例,实际应替换为交付网关。公网目标可能限制 ICMP 或对探测包限速,因此外部目标的丢包结果要结合 TCP 业务测试、服务商测试地址和实际访问路径判断。

如果环境允许,可使用 tracepath 或经授权的路径探测工具辅助记录路径变化。路由检查的重点是确认出口、源地址、网关和路径是否符合交付口径,而不是追求某个固定的跳数。

六、把端口速率、承诺带宽和实际吞吐分开验收

1. 先确认带宽的计费和交付口径

带宽验收前,需要明确服务商交付的是端口速率、共享峰值、独享带宽、峰值带宽,还是按方向分别限制的上下行带宽。

名称含义能否直接作为实际吞吐结论
网卡速率网卡和交换机当前协商出的链路速度不能,属于链路能力
端口速率机房交换端口配置的速率不能,可能高于实际限速
峰值带宽允许达到的上限不能代表持续可用速率
承诺带宽约定的可用带宽或计费口径应结合测试条件验收
单向吞吐某一方向的实际传输速率需要说明测试方向和并发数
双向吞吐上下行同时产生的流量能力不能与单向结果直接相加比较

1Gbps 等于 1000Mbps,但不等于每秒传输 1GB。如果按十进制单位估算,传输 1TB 数据的理想时间为:

  • 1TB × 8 = 8Tb;
  • 8Tb = 8,000,000Mb;
  • 在 1000Mbps 下,理想时间为 8,000,000 ÷ 1000 = 8000秒;
  • 约为 2小时13分。

在 500Mbps 下,理想时间约为 16,000秒,即4小时26分。实际还会受到 TCP、协议头、磁盘读写、CPU、并发连接数和对端限速影响,因此不能直接用文件复制时间反推机房端口速率。

2. 使用双方认可的测试端点

吞吐测试应使用服务商提供或双方认可的测试服务器,不要随意对公共地址进行高流量测试。以 iperf3 为例,测试端需要运行服务端,服务器作为客户端执行:

iperf3 -c <服务商测试服务器IP> -t 30 -P 4
iperf3 -c <服务商测试服务器IP> -t 30 -P 4 -R

其中:

  • -t 30 表示持续测试 30 秒;
  • -P 4 表示使用 4 条并行 TCP 流;
  • 不带 -R 时通常测试本机发往对端的方向;
  • 带 -R 时测试对端发往本机的方向。

实际执行时应将 <服务商测试服务器IP> 替换成双方确认的地址,并确认已获得测试授权。建议在不同时间重复几次,分别记录单流和多流结果;单流偏低而多流接近承诺值,可能是单连接窗口、路径或对端服务能力限制,不应立即认定为端口故障。

结果判断应以合同或订单中的带宽口径为准。例如:

  • 订单约定 1Gbps 独享带宽,结果长期只有约 200Mbps,应提交复核;
  • 订单仅约定 1Gbps 端口,但带宽限制为 200Mbps,端口协商 1Gbps 而吞吐约 200Mbps 可能符合交付;
  • 上行接近承诺值、下行明显偏低,不能用单向结果代替双向验收;
  • 测试期间接口出现丢包、错误计数或链路重连,应先排查链路稳定性,再讨论带宽数值。

七、用验收窗口确认稳定性

1. 稳定性应覆盖阵列、链路和路由

一次命令输出只能说明某个时刻的状态。交付验收可以在约定窗口内重复检查,至少保存开始和结束两个时间点的结果。重点观察:

  • RAID 是否始终保持 Clean 或 Optimal;
  • 是否出现新的 Failed、Degraded、Rebuild 或 Resync;
  • 内核是否出现磁盘 I/O 错误、控制器重置或网卡重置;
  • 物理端口是否发生 Link Down、Link Up;
  • 网卡错误、丢包和丢弃计数是否持续增加;
  • 到本地网关的测试是否稳定;
  • 到约定测试端点的吞吐和延迟是否有明显异常变化。

可在 Linux 中使用以下只读命令留存结束状态:

cat /proc/mdstat
ip -s link show eno1
ethtool eno1
journalctl -k --since "1 hour ago"

本地网关在正常链路下通常不应出现持续丢包;外部目标的 ICMP 丢包则要考虑目标限速和路径策略。稳定性判断应结合实际业务协议、测试端点和服务商 SLA,不宜仅凭一次公网 ping 得出“稳定”或“不稳定”的结论。

2. 异常结果如何处理

验收时可以按照“通过、待解释、暂缓签收”记录,而不是笼统写“服务器正常”。

发现情况处理建议
订单为 4 盘 RAID 10,实际 4 个成员均 Online,状态 Optimal/Clean可通过磁盘和阵列项目
系统只看到一个逻辑盘,但控制器显示 4 个物理成员不应因 lsblk 只显示一盘而判定少盘,应留存控制器证据
4 块盘中只有 3 块 Active,另一块为热备或未加入阵列暂缓,要求说明是否符合订单
阵列显示 Degraded、Rebuild 或 Failed暂缓,完成修复后重新验收
端口标称 10Gbps,但当前协商为 1Gbps检查光模块、线缆、交换机端口和配置后再验收
路由出口使用管理接口或错误源地址要求修正路由策略并复核
端口为 10Gbps,但合同带宽低于端口速率按合同带宽测试,不将两者混为一谈
系统容量比订单小,但差异可由 TB/TiB、RAID 元数据和文件系统解释记录换算依据;无法解释的容量差异应追问
阵列正常但日志出现磁盘错误、链路重置暂缓或要求提供处理记录,不能只看当前可用性

验收记录中应留下的证据

完成核对后,建议保存以下信息并关联服务器编号:

  1. 交付单和实际磁盘清单;
  2. 每块物理盘的型号、序列号、槽位和容量;
  3. RAID 控制器或 mdadm 的阵列详情;
  4. 阵列状态、成员数量、热备数量和逻辑卷容量;
  5. 业务网卡名称、MAC 地址、协商速率和接口统计;
  6. IPv4/IPv6 地址、默认网关和路由查询结果;
  7. 带宽测试的时间、测试端点、方向、并发数和结果;
  8. 验收窗口内的阵列日志、内核日志和链路状态;
  9. 对异常项的服务商回复、处理动作和复核时间。

最终签收条件应写成可验证的描述,例如“4 块指定 SSD 组成 RAID 10,4 块成员均 Online,Failed 为 0,阵列状态 Optimal,无进行中的重建;业务端口协商为 10Gbps,默认路由和源地址符合交付单,带宽按约定测试端点和方向复核通过”。这样的记录比单独写“日本服务器已部署 RAID 10、网络正常”更容易在后续扩容、故障或争议处理中使用。

本文由A5数据原创发布,转载请注明出处:https://www.a5idc.com/helpcontent/3936.html

相关推荐