linux系统服务器中常见故障及排查方法

已于 2024-06-17 16:54:55 修改
阅读量2.4k 收藏 47
点赞数 17
分类专栏： 运维宝典 文章标签： 服务器 linux 故障排查
于 2024-05-11 17:58:17 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_62294245/article/details/138707474
版权

🍁博主简介：
        🏅云计算领域优质创作者
        🏅2022年CSDN新星计划python赛道第一名

        🏅2022年CSDN原力计划优质作者
        🏅阿里云ACE认证高级工程师
        🏅阿里云开发者社区专家博主

💊交流社区：CSDN云计算交流社区欢迎您的加入！

目录

故障1：系统无响应

故障2：网络连接问题

故障3：文件系统错误

故障4：软件包依赖问题

故障5：用户权限问题

故障6：服务无法正常工作

故障7：磁盘空间不足

故障8：内存不足

故障9：服务端口被占用

故障10：防火墙和安全组问题

故障1：系统无响应

  • 可能原因：资源耗尽、进程冲突、硬件故障等。

  • 排查方法：

  • 使用top、htop或free -h命令检查系统资源使用情况

root@fylog001:~# top
top - 11:23:31 up 46 days, 23:38,  1 user,  load average: 0.00, 0.01, 0.00
Tasks: 156 total,   1 running, 155 sleeping,   0 stopped,   0 zombie
%Cpu(s):  0.1 us,  0.1 sy,  0.0 ni, 99.8 id,  0.0 wa,  0.0 hi,  0.0 si,  0.0 st
KiB Mem : 16431740 total,   940580 free,  1922844 used, 13568316 buff/cache
KiB Swap:        0 total,        0 free,        0 used. 14119512 avail Mem 

  PID USER      PR  NI    VIRT    RES    SHR S  %CPU %MEM     TIME+ COMMAND                                                                                                                                                                                
 1528 root      10 -10 1153656  24084   2276 S   0.3  0.1 180:53.36 AliDetect                                                                                                                                                                              
 8292 root      10 -10  117128  15572  10396 S   0.3  0.1 150:16.64 AliYunDun                                                                                                                                                                              
 8303 root      10 -10  137980   2304      0 S   0.3  0.0 197:15.24 AliYunDunMonito                                                                                                                                                                        
 8805 root      20   0 5882368 403512   4624 S   0.3  2.5  46:00.51 java                                                                                                                                                                                   
25413 root      20   0  690340  12256   8180 S   0.3  0.1  53:15.80 aliyun-service                                                                                                                                                                         
31180 root      20   0 2193756  13052  11080 S   0.3  0.1 275:12.95 argusagent                                                                                                                                                                             
    1 root      20   0  184908   4972   3308 S   0.0  0.0   0:27.71 systemd                                                                                                                                                                                
    2 root      20   0       0      0      0 S   0.0  0.0   0:00.31 kthreadd                                                                                                                                                                               
    3 root      20   0       0      0      0 S   0.0  0.0   0:10.57 ksoftirqd/0                                                                                                                                                                            
    5 root       0 -20       0      0      0 S   0.0  0.0   0:00.00 kworker/0:0H                                                                                                                                                                           
    7 root      20   0       0      0      0 S   0.0  0.0  27:04.35 rcu_sched                                                                                                                                                                              
    8 root      20   0       0      0      0 S   0.0  0.0   0:00.00 rcu_bh                                                                                                                                                                                 
    9 root      rt   0       0      0      0 S   0.0  0.0   0:00.03 migration/0                                                                                                                                                                            
   10 root      rt   0       0      0      0 S   0.0  0.0   0:06.02 watchdog/0                                                                                                                                                                             
   11 root      rt   0       0      0      0 S   0.0  0.0   0:04.28 watchdog/1 
root@fylog001:~# free -h
              total        used        free      shared  buff/cache   available
Mem:            15G        1.8G        913M        3.7M         12G         13G
Swap:            0B          0B          0B
  • 使用ps命令检查是否有异常进程
root@fylog001:~# ps axu
USER       PID %CPU %MEM    VSZ   RSS TTY      STAT START   TIME COMMAND
root         1  0.0  0.0 184908  4972 ?        Ss   Mar25   0:27 /sbin/init
root         2  0.0  0.0      0     0 ?        S    Mar25   0:00 [kthreadd]
root         3  0.0  0.0      0     0 ?        S    Mar25   0:10 [ksoftirqd/0]
root         5  0.0  0.0      0     0 ?        S<   Mar25   0:00 [kworker/0:0H]
root         7  0.0  0.0      0     0 ?        S    Mar25  27:04 [rcu_sched]
root         8  0.0  0.0      0     0 ?        S    Mar25   0:00 [rcu_bh]
root         9  0.0  0.0      0     0 ?        S    Mar25   0:00 [migration/0]
root        10  0.0  0.0      0     0 ?        S    Mar25   0:06 [watchdog/0]
root        11  0.0  0.0      0     0 ?        S    Mar25   0:04 [watchdog/1]
root        12  0.0  0.0      0     0 ?        S    Mar25   0:00 [migration/1]
root        13  0.0  0.0      0     0 ?        S    Mar25   0:04 [ksoftirqd/1]
  • 检查硬件状态，如内存、硬盘等。
  • 解决方法：

    • 重启系统或关闭不必要的进程。

    • 升级硬件或增加系统资源。

故障2：网络连接问题

  • 可能原因：网络配置错误、防火墙设置、网络设备故障等。

  • 排查方法：

  • 使用ping、traceroute命令检查网络连接。

root@fylog001:~# ping www.baidu.com
PING www.a.shifen.com (220.181.38.150) 56(84) bytes of data.
64 bytes from 220.181.38.150: icmp_seq=1 ttl=53 time=7.40 ms
64 bytes from 220.181.38.150: icmp_seq=2 ttl=53 time=7.40 ms
64 bytes from 220.181.38.150: icmp_seq=3 ttl=53 time=7.41 ms
64 bytes from 220.181.38.150: icmp_seq=4 ttl=53 time=7.37 ms

  • 检查网络配置文件（如/etc/network/interfaces或/etc/sysconfig/network-scripts/下的文件）。

  • 检查防火墙设置（如iptables或firewalld）。

root@fylog001:~# iptables -L
Chain INPUT (policy ACCEPT)
target     prot opt source               destination         

Chain FORWARD (policy DROP)
target     prot opt source               destination         
DOCKER-USER  all  --  anywhere             anywhere            
DOCKER-ISOLATION-STAGE-1  all  --  anywhere             anywhere            
ACCEPT     all  --  anywhere             anywhere             ctstate RELATED,ESTABLISHED
DOCKER     all  --  anywhere             anywhere            
ACCEPT     all  --  anywhere             anywhere            
ACCEPT     all  --  anywhere             anywhere            
ACCEPT     all  --  anywhere             anywhere             ctstate RELATED,ESTABLISHED
DOCKER     all  --  anywhere             anywhere            
ACCEPT     all  --  anywhere             anywhere            
ACCEPT     all  --  anywhere             anywhere
root@fylog001:~# systemctl status firewalld.service

  • 解决方法：

    • 修复网络配置或重启网络服务。

    • 调整防火墙规则或重启防火墙服务。

故障3：文件系统错误

  • 可能原因：磁盘故障、文件系统损坏、不正常关机等。

  • 排查方法：

  • 使用fsck命令检查并修复文件系统

root@fylog001:~# fsck
fsck from util-linux 2.27.1
e2fsck 1.42.13 (17-May-2015)
/dev/vda1 is mounted.

  • 检查磁盘状态（如使用smartctl）。

  • 解决方法：

    • 修复文件系统或恢复备份数据。

    • 更换损坏的硬盘。

故障4：软件包依赖问题

  • 可能原因：依赖关系不完整、版本不匹配等。

  • 排查方法：

  • 使用包管理器（如apt、yum或dnf）检查依赖关系。

  • 解决方法：

    • 更新软件包或安装缺失的依赖包。

    • 手动调整软件包依赖关系。

故障5：用户权限问题

  • 可能原因：权限不足。

  • 排查方法：

  • 使用ls -l命令检查文件或目录的权限。

root@fylog001:/etc# ls -l
total 844
-rw-r--r-- 1 root root    3028 Feb 27  2019 adduser.conf
-rw-r--r-- 1 root root      18 Oct 25  2021 adjtime
drwxr-xr-x 2 root root    4096 Oct 25  2021 alternatives
drwxr-xr-x 3 root root    4096 Oct 25  2021 apm
drwxr-xr-x 3 root root    4096 May 10 10:59 apparmor
drwxr-xr-x 8 root root    4096 May 10 10:59 apparmor.d
drwxr-xr-x 7 root root    4096 May 10 11:02 apt
-rw-r----- 1 root daemon   144 Jan 15  2016 at.deny
-rw-r--r-- 1 root root    2188 Sep  1  2015 bash.bashrc

  • 解决方法：

    • 修改文件或目录的权限（如使用chmod命令）。

    • 使用具有足够权限的用户执行操作。

故障6：服务无法正常工作

  • 可能原因：软件配置错误、版本不兼容、资源耗尽等。

  • 排查方法：

  • 检查服务的配置文件和日志文件。

  • 使用systemctl命令检查服务状态。

root@fylog001:/etc# systemctl status ssh
● ssh.service - OpenBSD Secure Shell server
   Loaded: loaded (/lib/systemd/system/ssh.service; enabled; vendor preset: enabled)
   Active: active (running) since Mon 2024-03-25 11:44:40 CST; 1 months 16 days ago
 Main PID: 955 (sshd)
    Tasks: 1
   Memory: 928.0K
      CPU: 112ms
   CGroup: /system.slice/ssh.service
           └─955 /usr/sbin/sshd -D

  • 解决方法：

    • 修复配置文件或重启服务。

    • 升级软件或调整配置以适应环境。

故障7：磁盘空间不足

  • 排查方法：

  • 使用df -h命令查看磁盘使用情况。

root@fylog001:/etc# df -h
Filesystem      Size  Used Avail Use% Mounted on
udev            7.9G     0  7.9G   0% /dev
tmpfs           1.6G  3.8M  1.6G   1% /run
/dev/vda1       394G   15G  363G   4% /
tmpfs           7.9G     0  7.9G   0% /dev/shm
tmpfs           5.0M     0  5.0M   0% /run/lock
tmpfs           7.9G     0  7.9G   0% /sys/fs/cgroup

  • 解决方法：

    • 清理不必要的文件或目录。

    • 增加磁盘空间或扩展分区。

故障8：内存不足

  • 排查方法：

  • 使用free -m命令查看内存使用情况。

root@fylog001:/etc# free -m
              total        used        free      shared  buff/cache   available
Mem:          16046        1881         908           3       13256       13783
Swap:             0           0           0

  • 解决方法：

    • 关闭不必要的进程或服务。

    • 升级硬件或增加虚拟内存。

故障9：服务端口被占用

  • 排查方法：

  • 使用netstat -tuln命令查看端口占用情况。

root@fylog001:~# netstat -tulnp
Active Internet connections (only servers)
Proto Recv-Q Send-Q Local Address           Foreign Address         State       PID/Program name
tcp        0      0 0.0.0.0:3306            0.0.0.0:*               LISTEN      12199/docker-proxy
tcp        0      0 127.0.0.1:42859         0.0.0.0:*               LISTEN      21096/hbrclient 
tcp        0      0 0.0.0.0:6379            0.0.0.0:*               LISTEN      8207/redis-server 0
tcp        0      0 0.0.0.0:22              0.0.0.0:*               LISTEN      955/sshd

  • 解决方法：

    • 停止占用端口的进程或服务。

    • 配置服务使用其他端口。

故障10：防火墙和安全组问题

  • 排查方法：

  • 检查防火墙规则和安全组设置。

  • 解决方法：

    • 调整防火墙规则或安全组设置以允许必要的通信。

请注意，以上只是一些常见的故障和排查方法，实际情况可能因系统和环境的不同而有所差异。在排查和解决故障时，应根据具体的错误信息和日志进行分析和处理。

Linux常见故障
gang926的博客
04-13 2188
实验一、文件系统修复1.环境描述：    在Linux系统中，非正常关机，突然断电，设备数据读写异常等原因导致文件系统的破坏。比较常见的是超级块（supper-block）损坏。2.名词解释：    超级块--文件系统的核心“档案”，它记录了该文件系统的类型，大小，空闲磁盘块等信息，类似Windows的分区表。3.实验案例演示：第一，破坏超级块(首先添加硬盘1G，并分区格式化)备注：查看可识别的硬...
Linux系统常见20问题及处理方法（涵盖了安装、配置、使用、维护等方面）
weixin_47450720的博客
04-14 2410
需要注意的是，不同的Linux发行版可能存20问题及处理方法，涵盖了安装、配置、使用、维护等各个方面。系统运行过程中出现各种错误提示，例如“Segmentation fault”、“Out of memory”等。尝试运行某个应用程序时，出现错误提示或无法正常启动。开机后无法看到硬盘，或无法正常访问硬盘。尝试安装软件，但提示错误或无法完成安装。尝试更新系统，但提示错误或无法完成更新。尝试卸载软件，但提示错误或无法完成卸载。尝试升级内核，但提示错误或无法完成升级。无法连接打印机，或打印机无法正常打印。
linux运维常见的22个故障排查和解决方法
04-28
本人整理一些工作多年运维常见的22个故障排查和解决方法供大家参考，方便提升自己处理工作经验
linux故障分析
席伟娜的专栏
12-13 2039
在处理Linux系统出现的各种故障时，故障的症状是最先发现的，而导致这以故障的原因才是最终排除故障的关键。熟悉Linux系统的日志管理，了解常见故障的分析与解决办法，将有助于管理员快速定位故障点。“对症下药”及时解决各种系统问题。 1、日志分析及管理 日志文件是用于记录Linux系统中各种运行消息的文件，相当于Linux主机的“日记”。不同的日志文件记载了不同类型的信息，如：Linux内核消息
【Linux基础知识】Linux系统故障排查：常见问题的解决方法与技巧
鸽芷咕的博客
02-23 576
在Linux系统的日常使用和运维过程中，难免会遇到各种各样的故障。掌握有效的故障排查方法和技巧，能够快速定位问题并解决，保障系统的稳定运行。本文将详细介绍Linux系统中一些常见问题的排查思路和解决办法。
Linux常见较全的故障修复思路及解决方案
LYX_WIN
05-23 2097
crontab是linux自动周期执⾏脚本的常用工具，实现服务器按着设定的周期策略进⾏执⾏脚本或命令任务，但是 crontab也常出现一些不执⾏的问题导致计划任务未按预期执⾏。根据个⼈运维工作所⻅的案例，进行归纳，常⻅问题如下:1、脚本编辑器错误shell脚本:#!/bin/shpython脚本 #!/bin/env/python 应根据服务器实际环境，设置好脚本解析器2、crontab任务⾏所有的⽂本路径not exists3、crontab脚本⽂件及命令⾏所⽤⽂件，权限不足。
关于Linux运维常见故障排查和处理的33个技巧汇总
热门推荐
java、c++、机器学习方向King
03-02 3万+
http://os.51cto.com/art/201803/567076.htm作为linux运维，多多少少会碰见这样那样的问题或故障，从中总结经验，查找问题，汇总并分析故障的原因，这是一个Linux运维工程师良好的习惯。每一次技术的突破，都经历着苦闷，伴随着快乐，可我们还是执着的继续努力，从中也积累了更多的经验，这就是实践给予我们的丰厚回报。下面汇总了我做项目过程可能出现的故障及解决方法，看看...
浅谈linux系统下常见的故障与处理方法
09-19 3034
与windows系统一样，linux操作系统也会存在很多问题和故障，很多linux新手都害怕故障，面对出现的问题显得无可奈何，更有甚者，由此放弃了linux，其实，我们不应该惧怕问题，学习就是一个发现问题与解决问题的过程，只要掌握了解决问题的基本思路，一切故障都会迎刃而解，当然前提...
Linux服务器中高负载现象故障排查方法.pdf
10-26
在Linux服务器管理中，遇到高负载现象是一种常见的挑战。高负载可能由多种因素引起，包括资源耗尽、硬件故障、软件问题或者恶意攻击。本文将详细介绍如何排查和解决这类问题。 首先，理解问题的背景至关重要。了解...
【数据库技术】MySQL多平台安装教程与常见问题解决方案：覆盖Windows、macOS和Linux系统安装步骤及故障排除的标题准确概括
最新发布
04-03
内容概要：本文档详细介绍了MySQL在Windows、macOS和Linux（以Ubuntu/Debian为例）三大操作系统上的安装方法，包括推荐的安装方式和备选方案。对于Windows系统，推荐使用MySQL Installer进行安装，同时提供了ZIP包...
Linux操作系统环境下常见故障的探讨 (1).pdf
09-06
当Linux服务器无法正常启动时，急救盘组可帮助运维人员进入一个临时的Linux环境，从而对硬盘文件系统进行维护和修复。比如，当硬盘上的数据分区因为某些原因无法正常挂载时，可以使用急救盘组，并通过`mount`命令将...
Linux服务器故障排查实用指南
01-20
Linux为我们提供了大量网络故障排查工具，在本文中，我们将讨论一些常见的网络问题，并介绍如何利用某些Linux工具追踪意外状况发生的根本原因。 　问题：服务器A无法与服务器B通信 　可能大家在实际工作中常见的...
Linux 常见故障的分析与排除故障
weixin_33766168的博客
06-03 248
    在linux系统启动过程中，涉及到MBR主引导记录，GRUB启动菜单，系统初始化配置文件等各方面，其中任何一个环节出现错误或者故障都可能会导致系统崩溃或者开机异常，因此一定要注意做好备份工作。  1. 模拟MBR扇区故障由于MBR扇区中包含了整个硬盘的分区记录，因此该扇区的备份文件必须存放到别的硬盘上或者其他存储设备上，否则在恢复时将无法读取到备份文件。这里做测试。首先加块硬盘分区格式化。...
linux常见系统故障
weixin_44743506的博客
08-21 525
目录 一、修复MBR扇区故障 二、修复grub引导故障 三、etc/inittab文件丢失 四、linux密码重置 五、修复文件系统 六、系统磁盘耗尽故障 七、磁盘配额 一、修复MBR扇区故障 应用示例： 1、关机挂载一块新硬盘，开机进入Linux系统，对新硬盘分区 ①fdisk -l（查看硬盘设备分区列表，是否存在/dev/sd...
Linux 系统故障排查思路简析
weixin_33895475的博客
02-15 490
处理linux系统故障的思路： 1.重视错误提示信息。 2.查阅日志文件 。message （系统日志） 服务的日志 error（应用日志） 3.分析，定位问题。 4.解决问题。 忘记root密码？ 重置：centos5或者6 启动加载grub引导菜单时 按esc 找到当前系统引导选项。 按方向键找到需要的...
linux故障排查
weixin_42152531的博客
09-14 1353
linux故障排查查看io情况查看CPU/内存等使用情况查看进程情况查看僵尸进程 linux查看磁盘io使用情况 查看io情况 iostat -x 1 10 每1秒刷新一次，一共刷新10次。 查看CPU/内存等使用情况 ps -aux 或者 top 查看进程情况 ps -aux | head -1; ps -aux | sort -rn -k +3 | head ps -aux | head -1 表示输出表头 sort语句 -r 逆序 -n 按数值大小排序 +3 表示按第三列排序 查看僵尸进程
Linux常见故障排查
qq_32462015的博客
07-27 216
一、背景 整理生产问题的排查方向 二、常见问题及排障方式 性能下降： 1、查看应用日志 2、查看中间件日志（nginx，tomcat等） 2、查看系统相关日志：/var/log/messages[应用日志]。/var/log/secure[登陆日志]。demsg[系统日志输出]。/tmp/ 和/var/tmp/[易攻击点]。crontab -l，/etc/crontab，/etc/cron.d/[常被攻击]。 Ul...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

小鹏linux

感谢老板，老板大气

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值