linux系统启动时间偶发变慢问题

1、背景介绍

在某个项目中，用户反馈在使用系统的过程中，开机时间会偶发变慢，导致在某些场景下不能达到开机时间要求。

2、问题复现

通过进一步排查，发现在拔掉网线的情况下，开机时间变慢变成必然发生的现象，在此基础上进行进一步的排查。

3、问题分析

通过思考决定分阶段来排查此问题，
1）第一阶段是按下开机按钮到系统引导项页面阶段.

• 首先通过掐表计算时间，发现从按下机器开机按钮到引导项显示页面的加载时间是没有变慢的，所以暂时排除机器硬件（网卡及其组件）损坏导致的系统变慢，暂且排除第一阶段影响系统变慢。

2）第二阶段是选择启动项之后到系统登录界面阶段。

• 通过systemd-analyze 工具，查看系统开机启动服务所占时间：

  systemd-analyze time
  systemd-analyze plot >1.svg
  systemd-analyze -h
  

• 通过systemd-analyze 工具，发现内核加载时间几乎没有变化，暂且排除内核导致的变慢；
• 下一步就是分析服务，通过查看日志message以及dmesg信息，发现系统启动时会卡在一个Network-wait-online的服务上，从而会导致系统启动时间变慢，问题定位完成。

4、代码分析

[root@localhost ~]# cat /usr/lib/systemd/system/NetworkManager-wait-online.service 
[Unit]
Description=Network Manager Wait Online
Documentation=man:nm-online(1)
Requisite=NetworkManager.service
After=NetworkManager.service
Before=network-online.target

[Service]
Type=oneshot
ExecStart=/usr/bin/nm-online -s -q --timeout=30
RemainAfterExit=yes

[Install]
WantedBy=network-online.target

此代码为NetworkManager-wait-online.service服务相关代码，通过分析，发现变慢问题与此服务的Type有关。
Type=oneshot这一选项适用于只执行一项任务、随后立即退出的服务。
拔掉网线后，网络无法连接，触发了此服务中的 timeout=30动作，从而导致系统开机时间变慢。

5、解决方案

将此服务的Type类型改为Type=simple，使服务并行，从而跳过卡在此处的情况。