记录一次linux内核内存越界导致系统重启的排查工作。

最新推荐文章于 2024-10-30 13:41:37 发布
最新推荐文章于 2024-10-30 13:41:37 发布
阅读量1.1k 收藏
点赞数
分类专栏： linux，驱动
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/cf125313/article/details/95611596
版权

根据内核发生oops的log及每次发生crash的位置都不一样，断定是内存越界导致内存被破坏，进而导致重启。因此，开启内核slub debug功能进行定位，经过一晚上的压力测试，得到如下log:

通过反汇编及代码分析，发现是gether_connect及gether_disconnect俩个函数重复释放同一块内存导致。

修复后跑压力测试，发现另外一个问题，分析如下

无v邪
关注
专栏目录
内存越界引起的bug汇总
guogaofeng1219的专栏
02-25 2038
1 一个比较隐蔽的死锁bug   在测试代码的过程中，发现有大概百分之一的概率会出现一个死锁bug。进过仔细检查，发现加锁，解锁的地方是没有问题的。实在找不到问题的原因了，一狠心在每次加锁和解锁之后，将rwlock_t中的lock值打印出来。 每次write_unlock之
Linux内存错误系统重启,linux服务器硬件报错，系统异常重启检测-MCElog
weixin_39807954的博客
05-07 1674
mcelog 是 x86 的 Linux 系统上用来检查硬件错误，特别是内存和CPU错误的工具。比如服务器隔一段时间莫名的重启一次，而message和syslog又检测不到有价值的信息。通常发生MCE报错的原因有如下：1、内存报错或者ECC问题2、处理器过热3、系统总线错误4、CPU或者硬件缓存错误一般来说当有错误提示时，需要优先注意内存问题，但由于现在内存控制器是集成在cpu里，所以有个别情况是...
Linux内存错误系统重启,[求助]linux无故重启，有什么办法定位问题根因吗？
weixin_30297493的博客
05-07 590
无故重启,可能的原因基本上就是驱动软件,电源,散热,以及振动引起的板卡或者元件松动这几类.驱动:如果服务器大部分时间都是运行同样的软件,驱动基本可以排除电源:这个是很常见的问题,如果有工具,监控一下主板上5v,12v这几个电压是否稳定,在同一接线板如果有其他功率设备开关机是否会导致大幅波动,如果没有工具,从同型号设备拔一个电源换上试试.散热:如果负载峰值时CPU或者内存...
内涵：高效学习与工作之内存泄漏问题的排查与定位
算法工程师进阶之路
03-20 425
高效学习与工作之内存泄漏问题的排查与定位linux 系统内存泄漏问题的排查与定位内存泄漏问题排查功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart...
Linux-内存越界
qq_42139383的博客
11-19 1648
内存越界是程序员比较头疼的问题，尤其在大型项目里，内存越界会导致随机错误或崩溃，不好定位。 1.什么是内存越界 内存越界就是操作内存的地址超出申请内存的范围，比如下面的代码，申请了1 byte内存，但对第二个字节赋值，这就发生了内存越界。 char* p = (char*)malloc(1); p[1] = 2; 2.内存越界为什么会导致随机错误 假设申请了2个buffer A和B，其中A和B恰好在虚拟地址上是连续存放的，如果A buffer 访问越界，把B的数据改写了，这就导致B出现隐藏bug，很可能需
linux 定位 踩内存_记录一次用户态踩内存问题
weixin_39644915的博客
12-20 1602
这几天在做总结，把三年前写的一个定位案例，翻了出来。回想起定位这个问题时的场景，领导催得紧，自己对很多东西又不熟悉，所以当时面临的压力还是很大的。现在回想起来感慨还是很多的，我们在遇到任何一个问题，一定不要放弃。还记得在产品线做开发时，学到的一些项目知识，任何一个bug，他总有一天会爆发出来。任何一个问题，总有一天找到好的解决方案。当我们尝尽了所有可以尝试的方案，定位办法，解决思路后，往往这个问题...
Android系统重启问题的归类
11-05
在Android系统中，当遇到异常导致kernel重启的情况时，开发者和故障排查工程师需要对问题进行深入分析以找出问题根源。本文将围绕“Android系统重启问题的归类”这一主题，详细探讨不同类型的重启原因以及如何收集和...
Linux系统排查1——内存篇
Vic的博客
09-28 592
常见工作中，计算机系统的资源主要包括CPU，内存，硬盘以及网络，过度使用这些资源将使系统陷入困境。本系列一共四篇博文，结合我在实习期间的学习，介绍一些常见的Linux系统排障工具及方法。 第1篇——内存篇 第2篇——CPU篇 第3篇——磁盘I/O篇 第4篇——网络篇 　　事实上，当上述服务器系统资源中的任何一个遭遇瓶颈，都会带来服务器性能的下降，典型的症状
Linux内存管理：性能调优与故障排查手册
Linux作为一个多用户、多任务的操作系统，其内存管理是系统性能优化的关键部分。Linux内存管理涉及内存分配、回收、调度等众多环节，必须确保在多种运行环境下，系统资源可以被高效、合理地利用。了解内存管理的基本
linux内存故障排查
削土豆的人er的园子
08-23 2770
上周五，在测试的一台服务器上频繁出现系统内存不够，进程被kill的现象。原以为是开源软件或自研软件内存泄漏导致的，可查看内存信息发现很奇怪，一台16GB的机器，进程总共就占了不到6GB，但memfree的内存只有160MB，cache也没有多少。 翻了很多资料，直到 https://www.cnblogs.com/tcicy/p/8299712.html 里面的这段话解答了我们的疑惑： 在VMware guest上有一个常见问题，就是VMWare ESX宿主机会通过guest上的Balloon drive
Linux内核笔记005 - 越界访问内存，Linux内核处理过程
北观止的博客
10-13 1658
1. 几个重要的数据结构和函数 内存管理本质 在Linux内核笔记004中，已经引出了"分配"的概念，它本质上就是在保护模式下，做两件事： ① 隔离同一进程已使用和未使用虚拟内存空间，以及整个系统的已使用和未使用物理内存空间 具体实现：记录已每个进程已使用的虚拟地址，和整个系统已使用的物理地址，分配时使用未使用的。 ② 隔离不同进程的用户空间 具体实现：为每个进程0-3G范围的虚拟地址，建立独立的映射，...
linux kernel 内存越界和泄漏的工具
shipinsky的博客
04-12 553
Linux内存管理 (22)内存检测技术(slub_debug/kmemleak/kasan) https://www.cnblogs.com/arnoldlu/p/8568090.html 内存 如何诊断SLUB问题 http://linuxperf.com/?p=184 SLUB DEBUG检测内存问题 https://blog.csdn.net/mengshulei/article/de...
数组越界 linux,数组越界导致系统重启的案例
weixin_31022521的博客
05-16 2761
这是作者在2017年处理的数组越界的案例，要理解该问题需熟练掌握以下知识：一. 问题描述引言一般数组越界问题, 往往是涉及多线程并发的情况下, 某个或多个临界资源(比如类或对象的成员变量)多线程并发读写而导致的异常。出现这样情况, 一般是该保护的地方没有用同步锁保护，或者是用错了同步锁，这类问题比较常规。但本文要分享的案例却是一个方法内的临界资源已被加锁保护的情况下仍然出现的数组越界问题, 导致s...
linux 内存溢出 重启,如何启用linux内核异常自动重启机制
weixin_39705193的博客
05-02 1231
内核出现异常，有这么几种情况：1.在内核代码执行路径上会主动的去检查一些执行环境，如果不满足触发panic；2.某段代码一直占着cpu，其他进程都得不到执行，这又分为两种情况：a)某段代码禁止了内核抢占，并且进入了死循环，这种情况下时钟中断可以响应，但是因为禁止了内核抢占，中断处理函数结束后仍然占着cpu，这就是所谓的soft lockupb)某段代码禁止了中断，并且进入了死循环，这种情况下时钟中...
c语言fread函数造成系统崩溃,关于C语言的fread()函数的问题
weixin_42183453的博客
05-23 1140
feof这个是判断fread是否越界读取了，读完到文件结尾他还是返回0的，之后再读取的时候才返回1。我改成了：void print_putout() {int i = 0, n;FILE *fp;BOOK *p1;fp = fopen("list。bok", "rb");print_list_menu();p1 = &book;while (!feof(fp)) {fread(p1, si...
导致线上项目宕机的原因和排查手段
最新发布
Apollo
10-30 1082
线上项目宕机的原因和排查手段，应该是全网比较全面的了，不进来看看？
【linux】linux内核问题记录
bandaoyu的note
02-26 540
【linux】linux内核问题记录 如何查看linux内核 cat /proc/version uname -a 一、查看linux内核版本号 1：登录linux，在终端输入 cat /proc/version 2：登录linux，在终端输入 uname -a即列出linux的内核版本号 。 3: 在Linux终端输入 uname -a即可查看linux的内核版本号。 二、查看linux版本信息 1：登录到linux服务器执行 lsb_release-a 命令，即可查看所有版本信息。 2：...
Linux服务器超过资源占用阈值自动重启，并通知钉钉机器人(CPU/Memory)
互联网民工手记
06-12 495
在Linux服务器上实现自动重启的脚本可以使用Shell脚本编写并结合cron作业调度器如果你在运行脚本时出现了 bc: command not found 的错误，这说明你的系统中没有安装 bc 工具，bc 是一个用于数学计算的命令行工具，我们需要使用它来进行浮点数比较。
linux 内存越界判断_Linux程序因难以定位内存错误在运行几个小时后挂掉！请问有没有什么样好的排查方法？如何排查大型C程序中的内存写越界导致的coredump...
weixin_39553352的博客
12-20 273
在上一篇文章中，小编为您详细介绍了关于《win7控制面板找不到realtek高清音频管理器？win7系统咋安装主板自带光盘》相关知识。本篇中小编将再为您讲解标题Linux程序因难以定位内存错误在运行几个小时后挂掉！请问有没有什么样好的排查方法？如何排查大型C程序中的内存写越界导致的coredump。遇到类似问题，我们的产品由于组件过多，又是共享指针操作，经常出现被我们称为重复释放的问题，①旦出现重...
电脑服务器出现内存错误的信息,内存异常会出现什么问题
weixin_42098251的博客
07-31 1936
内存异常会出现什么问题你知道吗?内存分为两种，一种是运行内存，比如4GB以及6GB这些常听到的配置。还有一种则是64GB以及128GB，这些并非运行内存。一起来看看内存异常会出现什么问题，欢迎查阅!内存导致CPU专用很高的问题1：服务器上的CPU使用率很高，以前遇到的一般是某个进程有问题，或者是服务器的CPU散热不好导致的，小哥也发过文章如下：服务器CPU使用率高问题案例分享2：今天我遇到的又是服...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

无v邪

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值