Linux系统诊断小技巧(14):启停问题之如何修复initrd损坏

题外话

我们先讲什么是initrd和需要的工具。

initrd的二意性

initrd在Linux内核社区有两种意义。一是内核的一种启动机制。二是指实现这种机制的一种方法。作为方法的initrd,已经逐步被initramfs取代

三大利器

关于工具的重要性我们就不絮叨了。解决启停问题,一定要有三大利器的辅助:快照、VNC和录屏工具。

关于这些工具,请参考Linux系统诊断小技巧(13):启停问题之如何修复grub损坏对应小节。

bind挂载

修复启停时经常需要做chroot操作,即我们要在一个新的根文件系统内操作。但是,只执行chroot是不够的。我们还需要挂载/dev、/proc和/sys目录。这样才能使用在chroot后继续使用系统数据。

关于bind挂载,同样请参考Linux系统诊断小技巧(13):启停问题之如何修复grub损坏对应小节。

回到话题

initrd丢失、损坏或者没有正常工作,是导致系统启动失败比较常见的原因。

如何解决这类问题呢?重新做initrd即可。那么,具体怎么操作呢?我们讨论下。这里我们主要是围绕阿里云的实例问题展开。

现场复现

initrd丢失相对容易模拟。重启、及时VNC登录,在grub提供可用内核清单界面,按字母e就能修改启动项配置。我们修改initrd文件名称即可。

修改文件名称
Linux系统诊断小技巧(14):启停问题之如何修复initrd损坏

按照终端提示,启动系统,得到结果如下(但是这个界面很快会被内核堆栈信息覆盖,灵活使用录屏工具是需要的)
Linux系统诊断小技巧(14):启停问题之如何修复initrd损坏

initrd缺少驱动

我们可以分别测试缺少主板驱动、磁盘驱动、显卡驱动等多种情形。简单计,这里我们只测试initrd只包括主板驱动的情形。

创建这样的initramfs,可以使用下面的命令:

kernel_verion_str=$(uname -r) # chroot情形的话,需要手工设定
dracut -d virtio_pci /boot/initramfs-${kernel_version_str}-issues.img ${kernel_version_str}

如果不是chroot环境,可以直接使用下面的命令

dracut -d virtio_pci /boot/initramfs-$(uname -r)-issues.img $(uname -r)

命令执行示例如下:
Linux系统诊断小技巧(14):启停问题之如何修复initrd损坏

验证下我们作出了initrd文件:
Linux系统诊断小技巧(14):启停问题之如何修复initrd损坏

复现现场,现在:
Linux系统诊断小技巧(14):启停问题之如何修复initrd损坏

磨刀不误砍柴工

常见的Linux系统都有救援模式,而且(大多)都是有多个内核可用。所以,一个内核的initrd出现问题,并不妨碍我们启动系统,拿到shell。但是,的确存在需要在其他系统上重新做initrd的情形。比如,我们运气不好,碰到的实例,其上的系统只有一个内核。这样现有系统是启动不起来了。系统启动不起来,则拿不到shell,拿不到shell,则读写不了系统盘。

所以,在运气不好的情况下,我们的问题就变成了两个:

  1. 通过什么方式来处理系统盘。
  2. 怎么重新生成initrd

解决第一个问题的方法比较多,这里我们提供一个使用快照的方式。

如何使用快照?

请参考Linux系统诊断小技巧(13):启停问题之如何修复grub损坏有关章节。

重新制作initrd的其他准备步骤

在正常实例上重新制作initrd需要

# 1. 把新创建磁盘作为数据盘挂载到正常实例上。这需要在控制台操作。
# 2. 挂载目标根文件系统。
mount /dev/vdb1 /mnt
# 3. 把/dev、/proc和/sys挂载到新挂载文件系统。这样我们就能够使用内核导出的系统数据了。
for d in dev proc sys;do mount --bind /$d /mnt/$d
4. chroot到目标根文件系统,使之成为当前跟文件系统。
chroot /mnt

有关上面步骤的执行示例,请参考Linux系统诊断小技巧(13):启停问题之如何修复grub损坏有关章节。

重新制作initrd

各个主流发行版都提供了制作initrd文件的易用工具,我们不赘述。这里我们以CentOS 7系统为例。重要的是要把需要启动系统所需的驱动不要忘记了。

对于阿里云当前的实例,主要是主板驱动(virtio_pci)和系统盘驱动(virtio_blk):

# 1. 如果要制作initrd文件的版本号不同于当前运行的内核(比如chroot条件下),
# 则需要手工设定内核版本号;否则,直接使用uname -r的结果即可
kernel_verion_str=...
# 2. 备份老的文件
cp -p /boot/initramfs-${kernel_version_str}.img /boot/initramfs-${kernel_version_str}.img.origin
# 3. 验证备份完毕
ls /boot/initramfs-${kernel_version_str}.img*
# 4. 删除老的initrd文件
rm -f /boot/initramfs-${kernel_version_str}.img
# 5. 重新生成initrd
dracut --add-drivers "virio_pci virtio_blk" /boot/initramfs-${kernel_version_str}.img ${kernel_version_str} 

执行示例如下

Linux系统诊断小技巧(14):启停问题之如何修复initrd损坏

这样我们就重新制作了initrd文件。

终焉

祝探索愉快。

上一篇:Linux系统诊断小技巧(15):启停问题之如何修复文件系统损坏


下一篇:【远程读脑】日本科学家开发AI系统将大脑思维变成图像