我遇到了一台位于香港的数据中心的Linux服务器，出现了无法通过SSH登录的情况。用户反馈他们输入密码时无反应，尝试重启服务器后依旧无法解决问题。经过一番排查和尝试，我决定通过进入恢复模式来进行修复。下面我将详细分享这一过程，帮助大家理解如何通过恢复模式来解决Linux服务器无法登录的问题。
1. 故障问题
首先，我的服务器配置如下：
- 硬件配置：1台物理服务器，型号为Dell PowerEdge R740，搭载了Intel Xeon Gold 6240 16核心处理器，64GB内存，和1TB SSD硬盘。
- 操作系统：CentOS 7.9（基于RedHat的Linux发行版）
- 网络环境：香港数据中心，提供公网IP，所有的连接请求都通过SSH协议（端口22）进行。
这个服务器之前运行稳定，突然在某天，用户无法通过SSH远程登录，具体表现为输入密码后没有任何响应，连接会超时。尝试了常规的重启操作后，问题依旧没有解决。考虑到SSH连接失败的常见原因，我怀疑是系统配置或权限问题。
2. 故障排查步骤
在无法通过SSH登录的情况下，我决定进入服务器的恢复模式（也称为单用户模式）进行故障排查。
2.1 获取控制台访问权限
由于无法通过SSH登录，我首先通过数据中心提供的KVM-over-IP功能获取到服务器的控制台访问权限。这种访问方式类似于直接插入显示器和键盘到服务器上，让我可以在不依赖网络的情况下，直接操作服务器。
2.2 重启并进入GRUB菜单
重新启动服务器。
在服务器启动时，按下Shift或Esc键，进入GRUB引导菜单。如果服务器使用的是UEFI启动方式，可能需要按下特定的快捷键（如F12）来进入启动选项。
2.3 编辑GRUB启动项
在GRUB菜单中，我选择了当前操作系统的启动项，然后按下 e 键进行编辑。此时，GRUB会显示启动参数配置界面。为了进入恢复模式，我需要在启动参数中添加一个 single 或 1 参数，表示启动进入单用户模式。
具体的操作步骤如下：
- 在GRUB配置中，找到以linux16或linux开头的行。
在该行的末尾添加 single，使其变成类似以下内容：
linux16 /vmlinuz-3.10.0-1127.el7.x86_64 root=/dev/mapper/centos-root ro single
这里的 single 参数指示系统以单用户模式启动，并且跳过多用户模式下的网络和其他服务加载。
按下 Ctrl + X 启动。
2.4 进入单用户模式
服务器会进入单用户模式（recovery mode），此时，系统不会启动网络服务或其他非必要服务，因此没有SSH服务会启动，确保没有其他人通过远程连接修改服务器。
在该模式下，我可以进行以下操作：
3. 故障诊断问题
3.1 检查磁盘空间
首先，我检查了磁盘空间，确保没有因为磁盘满了导致系统无法正常启动或执行。使用以下命令查看磁盘使用情况：
df -h
如果根目录或其他分区空间已满，系统将无法正常启动服务。这种情况下，可以考虑清理不必要的日志文件或旧的缓存文件。
3.2 检查文件系统
接下来，我对文件系统进行检查。使用以下命令来检查和修复文件系统错误：
fsck /dev/mapper/centos-root
如果有任何错误，fsck 会自动进行修复。
3.3 检查用户权限
进入单用户模式后，我检查了用户的权限设置，特别是/etc/passwd和/etc/shadow文件，确保没有损坏或配置错误。
cat /etc/passwd
cat /etc/shadow
如果有损坏或错误的用户配置，可以手动修复这些文件。
3.4 检查SSH配置
如果文件系统和权限没有问题，接下来我检查了SSH服务的配置。可能的问题包括sshd服务配置错误或配置文件损坏。检查/etc/ssh/sshd_config文件是否正确，并重启SSH服务：
systemctl restart sshd
3.5 检查SELinux状态
在Linux服务器中，SELinux（安全增强Linux）可以阻止某些服务的运行，导致无法正常登录。使用以下命令检查SELinux状态：
sestatus
如果SELinux处于“Enforcing”模式，可以临时禁用SELinux进行排查：
setenforce 0
如果这解决了问题，可以通过修改/etc/selinux/config文件将SELinux状态设置为permissive，以便下次启动时避免类似问题。
4. 恢复正常启动
在排查和修复了问题后，我退出单用户模式并重新启动服务器：
reboot
服务器成功重启后，我再次尝试使用SSH进行远程登录。这一次，我成功登录到服务器，问题得到了解决。
通过进入Linux服务器的恢复模式，我成功地诊断并解决了无法登录的问题。这一过程强调了以下几点：
- 控制台访问：通过KVM-over-IP等方式获取物理控制台的访问权限，是排查无法登录问题的第一步。
- 恢复模式：单用户模式提供了一个不启动网络服务的环境，便于进行系统修复。
- 文件系统检查：确保文件系统没有损坏，防止引导失败。
- 权限和配置检查：确保用户配置和SSH服务配置正确，避免权限和服务问题导致无法登录。
通过以上操作，不仅解决了当前的问题，也为今后的服务器管理积累了宝贵经验。希望我的经验能对你们在类似情况下的排查有所帮助。
