Linux启动故障处理

【摘要】

当Linux系统出现故障无法正常启动系统时，Linux准备了单用户模式、救援模式等方式可以让我们有效的处理这类问题。本文简单分享一个利用救援模式解决Redhat系统无法启动的案例。

【正文】

一、   问题背景

1)    问题描述

一台部署了RHEL 7.2的物理服务器，突发死机故障，在尝试重启时，发现服务器无法正常进入 *** 作系统，直接进入emergency mode。本文主要分享 *** 作系统启动异常的问题排查过程。（服务器死机据后续日志分析，确定为内核的bug所致，本文不进行累述）

2)   故障现象

系统启动后，提示无法找到/dev/mapper/rhel-root，并直接进入emergency mode。

二、   排查思路

1)    收集系统启动异常的相关提示信息，获取到问题关键点：

Warning:/dev/rhel/root does not exist

初步定为配置文件问题或者逻辑卷root本身问题；

2)    尝试在应急模式下检查逻辑卷状态，发现当前情况并不稳定，常用命令无法使用、显示多为乱码；

3)    尝试进入单用户模式，发现情况和应急模式一样；

Redhat 7.2进入单用户模式：

1、开机启动至内核选择界面，选择第一项，按e进行编辑

2、定位到linux16这一行，找到ro，修改其为rw init=/sysroot/bin/sh

3、按ctrl+X启动至单用户模式

4)    利用系统安装光盘，进入Linux救援模式，进行排查。

Redhat 7.2救援模式启动方法：

1、把光盘加入光驱，然后启动，以光盘进行引导，选择救援模式（中间具体的步骤不再细说）

2、文件系统挂载到/mnt/sysimage目录下，这时切换到此目录下使用chroot /mnt/sysimage这条命令即可

5)    在救援模式下，首先查看服务器lv的情况，发现所有lv

status均为未激活状态。

查看lv

#Lvdisplay

修改lv

#vgchange -a y /dev/docker/root

6)    在尝试修改root的lv status时，发现root所在的vg名和启动时所指定的vg名不一致，基本确定问题点；

7)    修复

l  编辑文件/etc/default/grub

l  修改此文件中GRUB_CMDLINE_LINUX一行中rd.lvm.lv为合适的值

l  再执行以下命令重做grub ：

n UEFI: grub2-mkconfig -o /boot/efi/EFI/redhat/grub.cfg

n  非UEFI：grub2-mkconfig -o /boot/grub2/grub.cfg

l  查看文件grub.cfg中是否修改为rd.lvm.lv=rhel/root

l  修改/etc/grub2.cfg中root=后接的lv路径改为实际的路径。

8)    系统启动后，通过history日志，确定为该系统业务部署时，使用了vgrename命令修改了vg名。

三、   总结

对于Linux的问题处理，需要对Linux的运行原理有所理解，这此前提下才能根据有限的提示信息判断问题方向、确定排查范围、找到解决方法。同时，提醒各位初学linux的同事么，在进行linux的一些 *** 作时，需要充分考虑这些 *** 作可能造成的影响，避免类似上述的问题发生。

转自 嘉为教育-rhce认证_rhce培训_linux培训_linux认证_linux考证

除了检查本机防火墙和云控制台安全组之外，可以通过 telnet 去连接

运行命令 tailf /var/log/messages

当linux服务启动失败的时候，系统会提示我们使用 journalctl -xe 命令来查询详细信息，定位服务不能启动的原因。

mod_evasive是Apache防御攻击的模块，有助于防止DoS、DDoS以及对Apache服务器的暴力攻击。它可以在攻击期间提供规避行动，并通过电子邮件和系统日志工具报告滥用行为。该模块的工作原理是创建一个IP地址和URI的内部动态表，并拒绝以下任何一个IP地址：

如果满足上述任何条件，则发送403响应并记录IP地址。

没有 *** 作系统能够确保100%可靠。终有一天，即使Linux也会无法启动。本文为你提供一些在Linux工作站无法正常启动时所采用的策略。

　不管你多么喜爱你的Linux机器，有时候你都必须恢复你的系统。是的，即使一台Linux机器也可能遭受系统崩溃：不管是由于视频配置错误、内核更新出错、或是由于init脚本配置错误，这种情况都是必然的。我看到过大量这种情况——即使在我自己的机器上，大多数是由于X配置出错——这确实令人沮丧。

　在我看来，重新安装系统并不是最佳救援计划。有时候，最佳救援计划甚至不需要从救援磁盘启动。本文将为如何避免系统崩溃提供一些提示和诀窍，帮助你建立恢复崩溃的Linux机器所需的工具。

　使用正确的运行级别

　安装好一个新的Linux系统后，我立即采取措施以确保灾难不会轻易发生。其中一个措施就是编辑系统的运行级别。运行级别告诉系统离采用引导过程还有多远。运行级别分为六个等级：

　0级：停止(不设置initdefault)

　1级：单用户模式

　2级：多用户模式，没有NFS(与3级相同，如果你没有建立网络)

　3级：完整的多用户模式

　4级：不使用

　5级：X11

　6级：重新启动(不设置initdefault)

　新型的Linux系统几乎总是默认使用运行级5(X11)，表示系统在引导完成后，将会在图形登录界面处停止。在某物(或某人)使用X配置前，系统一切正常。

　然后你必须找到一个登录方法。你可以按下[Ctrl][Alt][F7]进入一个基于文本的虚拟窗口，但为什么要这么麻烦呢？相反，我总是在/etc/inittab文件中将运行级更改为3级。你更改的代码为：

　id:5:initdefault:

　它被更改为：

　id:3:initdefault:

　当X出错时，这是一个非常简单的系统恢复方法。

　多内核

　另一个明显的磁盘恢复方法是总是安装一个正常运转的内核。我通常在一个通过yum更新的内核上工作。有时候，内核会出现一些错误，使得我的一台或几台机器无法启动。

　为避免这种情况，我一直保证在机器上使用至少一个正常运行的内核。要解决这个问题，首先应在/etc/yum.conf文件中添加plugins=1，然后应用这段脚本(由RedHat的Jeremy Katz编写)，并将它命名为n-installonly.py，保存在/usr/lib/yum-plugins文件中。你可以通过修改tookeep变量(默认为2)的方法更新系统所使用内核的数量。

　知道系统上有一个正常运转的内核，你就可以进行安全升级。如果新内核出错，只需启动旧内核就可以解决新内核上的问题(不管是删除、重新编译还是升级)。

　救援模式

　如果你在使用Red Hat和LILO引导加载器，你就可以插入产品光盘1，并在引导提示符下输入Linuxrescue进入救援模式。启动机器后，你就会看到bash#提示符。在这个模式下，你可以使用许多工具。

　如你所见，有检查硬盘完整性、修复硬盘、检查内核模块、装配设备、以及创建文件系统等的工具。此时是进行救援尝试的最佳时机(如果你使用的是一个Red Hat，或基于Red Hat的系统)。

　另一个救援方法是进入单用户模式，这里你的计算机引导进入运行级1。系统装配你的本地文件系统，但不激活网络。你得到一个可用的系统维护外壳。要进入单用户模式，在LILO提示符下输入：

　Linuxsingle

　或

　Linuxemergency

　建立一张救援CD

　如果你正在使用LILO引入加载器，可以使用一个叫做mkrescue的强大工具。这个工具一般用于创建引导软盘，但也可用来创建ISO。其用法如下。

　如果你使用Mandriva：

　mkrescue --iso --initrd /boot/initrd-KERNEL-NUMBER.img --

　kernel /boot/vmlinuz-KERNEL-NUMBER

　注意：这里的KERNEL-NUMBER指内核的版本号。

　如果你不能确定内核的版本，可以用以下命令找到intrd和vmlinuz的号码：

　uname –r

　运行这个命令后，你就会在运行mkrescue命令的目录中发现一个rescue.iso文件。现在你可以用以下命令建立镜像：

　首先，检查建立CD的设备号码：

　cdrecord –scanbus

　然后用以下命令建立镜像：

　cdrecord dev=0,0,0 rescue.iso

　注意：这里的dev=0,0,0是用上面的scanbus命令查出的号码。

　如果你使用Slackware，使用这些步骤建立一张引导CD：

　mkrescue –iso

　注意：Slackware自动获知在ISO中放入何种内核。

　然后，你可以用建立Mandriva镜像同样的方法建立镜像。

　SystemRescueCD

　SystemRescueCD是一个保存在可引导光盘上的Linux系统，用于在系统崩溃后修复系统和数据。它还可在计算机上方便地执行管理任务，如建立和编辑硬盘分区。它由许多系统实用工具(parted、partimage、fstools)和基本实用工具(编辑器、midnight commander文件管理器和网络工具)构成。

　它使用起来非常简单。只需要从光盘启动你就可以执行一切 *** 作，就像从硬盘启动一样。系统内核支持大多数重要的文件系统(ext2/ext3, reiserfs, reiser4, xfs, jfs, vfat, ntfs, iso9660)和网络(samba和nfs)。

　SystemRescueCD可能是市面上最优秀的救援系统。你不仅可以从光盘上使用这种救援方法，还可以将这个救援系统放在U盘上使用。

　要在一个U盘上建立一个SystemRescueCD，你需要大于256MB的磁盘空间。从Sourceforge下载iso镜像并把它烧制到光盘上。现在你必须在U盘上创建文件系统。使用dmesg命令找出U盘名称，然后用以下代码擦写U盘：

　dd if=/dev/zero of=/dev/sda

　这里的/dev/sda是U盘的名称。

　现在在U盘上安装主引导记录：

　install-mbr /dev/sda

　或

　install-mbr --force /dev/sda(如果命令出错)

　现在建立分散分区：

　parted /dev/sda

　(parted) mkpartfs primary fat32 0 100% // use help or help mkpartfs command to see help

　(parted) print // check if the write was ok

　(parted) quit

　现在已经建立好文件系统，然后将用SystemRescueCD镜像烧制的CD中的文件复制到U盘中。保证你复制的文件等级和CD上的相同。

　现在，使得U盘可以用sysLinux命令启动：

　sysLinux/dev/sda1

　这里的/dev/sda1是磁盘的名称。

　现在你已经建立了一个你可以整天随身携带的救援U盘。由于你使用Linux，你并不需要经常用到它。

　最后总结

　Linux是一个非常稳定的环境，但由于该系统中还有许多其它系统，它们可能会出现错误。虽然我们很容易会由于使用Linux而洋洋自得(因为它存在诸多优点)，但了解如何拯救一个系统崩溃的机器也不失为一种明智的做法。

　当然，不是世界上所有的救援系统都能100%地恢复你的系统，因此你可能希望考虑为你的Linux服务器和桌面系统实施一个灾难恢复计划。

---