记录一次Java进程被系统杀掉的日志

最新推荐文章于 2024-04-03 17:54:56 发布
最新推荐文章于 2024-04-03 17:54:56 发布
阅读量481 收藏
点赞数
文章标签： java 数学建模 算法
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/umgsai/article/details/131389466
版权

cd /var/log

tail -200 messages

Jun 25 17:50:02 izuf6iup1ceq6k8u0pzwchz systemd: Removed slice User Slice of root.
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: AliYunDunMonito invoked oom-killer: gfp_mask=0x201da, order=0, oom_score_adj=0
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: AliYunDunMonito cpuset=/ mems_allowed=0
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: CPU: 3 PID: 29978 Comm: AliYunDunMonito Kdump: loaded Tainted: G           OE  ------------ T 3.10.0-1160.81.1.el7.x86_64 #1
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: Hardware name: Alibaba Cloud Alibaba Cloud ECS, BIOS 9e9f1cc 04/01/2014
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: Call Trace:
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffff937b1bec>] dump_stack+0x19/0x1f
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffff937acb4f>] dump_header+0x90/0x22d
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffff9310d332>] ? ktime_get_ts64+0x52/0xf0
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffff9316679f>] ? delayacct_end+0x8f/0xc0
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffffc04077da>] ? virtballoon_oom_notify+0x2a/0x80 [virtio_balloon]
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffff931cd1d5>] oom_kill_process+0x2d5/0x4a0
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffff931ccb9d>] ? oom_unkillable_task+0xcd/0x120
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffff931cd8da>] out_of_memory+0x31a/0x500
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffff931d46e4>] __alloc_pages_nodemask+0xae4/0xbf0
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffff93225688>] alloc_pages_current+0x98/0x110
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffff931c8af7>] __page_cache_alloc+0x97/0xb0
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffff931cbb80>] filemap_fault+0x270/0x420
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffffc034fa06>] ext4_filemap_fault+0x36/0x50 [ext4]
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffff931fa05a>] __do_fault.isra.61+0x8a/0x100
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffff931fa60c>] do_read_fault.isra.63+0x4c/0x1b0
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffff93201fc0>] handle_mm_fault+0xa20/0xfb0
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffff937bf7d3>] __do_page_fault+0x213/0x510
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffff937bfbb6>] trace_do_page_fault+0x56/0x150
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffff937bf112>] do_async_page_fault+0x22/0x100
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [<ffffffff937bb7e8>] async_page_fault+0x28/0x30
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: Mem-Info:
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: active_anon:1818816 inactive_anon:29 isolated_anon:0#012 active_file:2025 inactive_file:3509 isolated_file:0#012 unevictable:0 dirty:5 writeback:0 unstable:0#012 slab_reclaimable:8021 slab_unreclaimable:5608#012 mapped:581 shmem:76 pagetables:4660 bounce:0#012 free:26275 free_pcp:374 free_cma:0
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: Node 0 DMA free:15908kB min:136kB low:168kB high:204kB active_anon:0kB inactive_anon:0kB active_file:0kB inactive_file:0kB unevictable:0kB isolated(anon):0kB isolated(file):0kB present:15992kB managed:15908kB mlocked:0kB dirty:0kB writeback:0kB mapped:0kB shmem:0kB slab_reclaimable:0kB slab_unreclaimable:0kB kernel_stack:0kB pagetables:0kB unstable:0kB bounce:0kB free_pcp:0kB local_pcp:0kB free_cma:0kB writeback_tmp:0kB pages_scanned:0 all_unreclaimable? yes
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: lowmem_reserve[]: 0 2794 7533 7533
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: Node 0 DMA32 free:45264kB min:25020kB low:31272kB high:37528kB active_anon:2687148kB inactive_anon:44kB active_file:2212kB inactive_file:4072kB unevictable:0kB isolated(anon):0kB isolated(file):0kB present:3111616kB managed:2864968kB mlocked:0kB dirty:4kB writeback:0kB mapped:480kB shmem:104kB slab_reclaimable:8596kB slab_unreclaimable:7072kB kernel_stack:1536kB pagetables:6364kB unstable:0kB bounce:0kB free_pcp:696kB local_pcp:0kB free_cma:0kB writeback_tmp:0kB pages_scanned:9165 all_unreclaimable? no
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: lowmem_reserve[]: 0 0 4738 4738
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: Node 0 Normal free:43928kB min:42420kB low:53024kB high:63628kB active_anon:4588116kB inactive_anon:72kB active_file:5888kB inactive_file:10068kB unevictable:0kB isolated(anon):0kB isolated(file):0kB present:4980736kB managed:4851924kB mlocked:0kB dirty:16kB writeback:0kB mapped:1844kB shmem:200kB slab_reclaimable:23488kB slab_unreclaimable:15360kB kernel_stack:2768kB pagetables:12276kB unstable:0kB bounce:0kB free_pcp:1380kB local_pcp:0kB free_cma:0kB writeback_tmp:0kB pages_scanned:24417 all_unreclaimable? yes
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: lowmem_reserve[]: 0 0 0 0
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: Node 0 DMA: 1*4kB (U) 0*8kB 0*16kB 1*32kB (U) 2*64kB (U) 1*128kB (U) 1*256kB (U) 0*512kB 1*1024kB (U) 1*2048kB (M) 3*4096kB (M) = 15908kB
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: Node 0 DMA32: 1228*4kB (UEM) 970*8kB (UEM) 771*16kB (UEM) 399*32kB (UEM) 88*64kB (UEM) 17*128kB (UEM) 0*256kB 0*512kB 0*1024kB 0*2048kB 0*4096kB = 45584kB
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: Node 0 Normal: 1190*4kB (UEM) 222*8kB (UE) 354*16kB (UEM) 287*32kB (UEM) 189*64kB (UEM) 64*128kB (UEM) 9*256kB (UEM) 0*512kB 0*1024kB 0*2048kB 0*4096kB = 43976kB
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: Node 0 hugepages_total=0 hugepages_free=0 hugepages_surp=0 hugepages_size=1048576kB
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: Node 0 hugepages_total=0 hugepages_free=0 hugepages_surp=0 hugepages_size=2048kB
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: 6120 total pagecache pages
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: 0 pages in swap cache
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: Swap cache stats: add 0, delete 0, find 0/0
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: Free swap  = 0kB
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: Total swap = 0kB
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: 2027086 pages RAM
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: 0 pages HighMem/MovableOnly
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: 93886 pages reserved
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [ pid ]   uid  tgid total_vm      rss nr_ptes swapents oom_score_adj name
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [  344]     0   344    11908       90      27        0             0 systemd-journal
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [  369]     0   369    11068      182      24        0         -1000 systemd-udevd
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [  459]     0   459    30263      114      28        0         -1000 auditd
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [  483]     0   483     6653      139      19        0             0 systemd-logind
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [  484]    81   484    14525      148      33        0          -900 dbus-daemon
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [  485]     0   485     5418       73      16        0             0 irqbalance
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [  486]   999   486   153057     1632      61        0             0 polkitd
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [  502]     0   502    31596      156      18        0             0 crond
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [  503]     0   503     6476       54      17        0             0 atd
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [  521]    38   521    11825      180      28        0             0 ntpd
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [  533]     0   533    27549       32      10        0             0 agetty
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [  535]     0   535    27549       32      11        0             0 agetty
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [  748]     0   748    25751      514      51        0             0 dhclient
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [  813]     0   813   143491     3231      97        0             0 tuned
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [  816]     0   816   129088      927     115        0             0 rsyslogd
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [ 3357]     0  3357    28249      257      56        0         -1000 sshd
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [ 4365]     0  4365   109338      239      28        0             0 AliSecGuard
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [25463]     0 25463    21772     4274      44        0             0 AliHips
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [29878]     0 29878    10899      424      21        0             0 AliYunDunUpdate
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [29968]     0 29968    25995     1142      51        0             0 AliYunDun
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [29978]     0 29978    35056     3240      70        0             0 AliYunDunMonito
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [ 9960]     0  9960    14572      952      30        0             0 AliNet
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [ 5273]     0  5273   203791     1421      18        0             0 aliyun-service
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [ 5382]     0  5382     4462      131      13        0             0 assist_daemon
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [19803]     0 19803    28322       49      12        0             0 sh
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [19805]     0 19805  2608346  1795283    3643        0             0 java
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: [ 9608]     0  9608   266180     2899      93        0             0 AliDetect
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: Out of memory: Kill process 19805 (java) score 902 or sacrifice child
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz kernel: Killed process 19805 (java), UID 0, total-vm:10433384kB, anon-rss:7181132kB, file-rss:0kB, shmem-rss:0kB
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz systemd-logind: Removed session 18135.
Jun 25 17:52:35 izuf6iup1ceq6k8u0pzwchz systemd: Removed slice User Slice of admin.

商商-77
关注
你见过java程序自毁(kill)吗？我踩过
BASK2311的博客
02-28 2007
在线音乐戳我呀！音乐博客源码上线啦！之前专栏奔向Linux、Docker前几篇讲了Docker的安装部署，操作算是比较简单。你见过java程序自毁（kill）吗？我遇到过。今天，兴致勃勃想登陆在线音乐听听周董的《稻香》，结果，发现请求音乐接口失败（音乐博客是由java服务提供的第三方服务），于是马上进入服务器看下日志，进行了排查之路。接下来将分享如何在服务器排查java服务无缘无故被kill掉的问题，这个问题非常有意思，主要是很难排查，自己被kill掉，一五一十盘出。
java 进程被杀死回调_Linux java进程无故被kill
weixin_33725576的博客
02-17 936
这两天，演示环境的java应用无端端就被停止了。在这里记录一下原因和排查过程：发现应用挂掉以后，第一时间登陆centos，发现进程没有了。于是重新启动应用。但是启动不起来，去看业务日志，没有找到任何堆栈信息。后来，在同事的指导下，找到了jdk的错误日志(如果没有指定，通常生产在应用的bin目录下)：hs_err_pid9758.logMemory: 4k page, physical 162675...
Linux笔记--查看Linux系统自动Kill掉的进程
牵一只蜗牛去散步
12-12 7313
今天在服务器训练一个模型，程序无任何错误，但一段时间后挂在后台的进程莫名被Kill掉，原因在于服务器 linux 系统的运行内存不足，为了避免系统奔溃，系统主动 kill 内存占用最大的进程。通过查看系统日志，可以确定被Kill掉的进程是否是因为内存占用过大，导致系统 out of memory。根据上图的时间、进程号和原因，可以判断进程确实是由于内存不足而被系统Kill掉的。
linux 进程被杀日志,Linux查看日志和关闭、杀***进程命令
weixin_39761491的博客
05-01 902
1 -----Linux查看tomcat日志命令：cd /：切换到根目录ll:查看根目录下的文件cd /data/kafu/log:切换到日志目录ll:查看日志目录下的文件tail -500 catalina.out : 查看最近的500行日志记录tail -f catalina.out : 查看实时日志记录Linux查看指定时间段日志例如:查看usercenter.log日志中1...
进程被os杀死后，检查系统日志的命令
shuipinglp的专栏
10-16 753
dmesg | egrep -i -B100 'killed process' 或者直接查找文件内容 egrep -i 'killed process' /var/log/messages
Linux进程被杀掉（OOM killer），查看系统日志
在路上2017的专栏
01-29 2236
基本概念： Linux 内核...
java进程老挂掉_JAVA进程突然挂掉
weixin_32103331的博客
02-23 2419
JVM内存不足导致进程死掉. Native memory allocation (mmap) failed to map一台服务器上部署很多JAVA进程已经是微服务的常态，但也有些坑。背景，测试服务器上的一些JAVA进程突然挂掉，查看call back的日志发现如下：# There is insufficient memory for the Java Runtime Environment to...
JAVA进程突然消失问题解决方案
08-19
如果你发现Java进程无故消失，第一步应该检查是否被OOM Killer杀死。这可以通过查看系统日志完成，例如 `/var/log/messages`，并使用命令 `egrep -i 'killed process' /var/log/messages` 来搜索相关错误信息。 ...
linux杀掉cpu使用率高的进程,线上linux系统故障排查之一：CPU使用率过高
weixin_29786123的博客
04-28 1412
一个应用占用CPU很高，除了确实是计算密集型应用之外，通常原因都是出现了死循环。下面我们将一步步定位问题，详尽的介绍每一步骤的相关知识。一、通过top命令定位占用cpu高的进程执行top命令得到以下结果：top命令执行结果通过上图可以明显看出进程PID41843占用cpu过高，明显存在问题，定位到了进程id。当然如果你想只观察进程PID41843的CPU和内存以及负载情况，可以使用以下命令top ...
linux查询进程挂的日志,linux下进程突然断掉后的日志查询
weixin_33558072的博客
05-02 1961
最近写了一个实现监控的服务，可某天去看的时候进程突然木有了，这就捉急了，好好的是啥原因了呢？不会有人不小心把偶的进程关掉了把！后发现一个linux日志文件：/var/log/messages打开文件查找进程标志(libRTICServer)发现：May 28 10:11:12 mysql-slave kernel: libRTICServer[14135]: segfault at 7fb75e3...
JAVA 程序突然挂掉排查记录
yangwy012210的博客
07-16 3375
1.程序运行一段时间后，突然挂掉,程序日志无任何异常记录 2.查看系统日志（/var/log/message）会发现是被系统杀死 原因： Linux 内核根据应用程序的要求分配内存，通常来说应用程序分配了内存但是并没有实际全部使用，为了提高性能，这部分没用的内存可以留作它用，这部分内存是属于每个进程的，内核直接回收利用的话比较麻烦，所以内核采用一种过度分配内存（over-commit memory）的办法来间接利用这部分 “空闲” 的内存，提高整体内存的使用效率。一般来说这样做没有问题，但当大多数..
Linux进程kill记录,Linux之Kill进程的N种方法
weixin_32431067的博客
05-02 845
常规篇：首先，用ps查看进程，方法如下：$ ps -ef……smx 1822 1 0 11:38 ? 00:00:49 gnome-terminalsmx 1823 1822 0 11:38 ? 00:00:00 gnome-pty-helpersmx 1824 1822 0 11:38 pts/0 00:00...
java进程自动杀死
weixin_30336061的博客
07-20 1016
连续两天凌晨进程莫名消失，gc日志正常，jvm无error dump日志 查看linux日志 vim /var/log/messages Jul 19 04:45:03 Aliyun-kernel: Out of memory: Kill process 22339 (java) score 85 or sacrifice child Jul 19 04:45:03 Aliyun-...
查看linux中程序是否被系统杀死，如何查看日志
Lemon_D1999的博客
03-06 6042
最近在linux开发日常中，维护之前发布的程序，几台服务器只有一台在重启，而且不定期，查看服务日志也没有任何signal信号以及服务挂掉的原因打印，迫于无奈怀疑是linux系统给服务干掉了。于是想查看服务被杀掉的日志，看看系统日志，即可判断。即途中目录下的messages文件，通过命令即可过滤信息查看是否被系统killed。用以下命令查看系统日志信息！命令输出如下：参数解析：total-vm: total virtual memory. 进程使用的总的虚拟内存。
Linux 程序被Killed，如何精准查看日志？
最新发布
wzk4869的博客
04-03 2577
Linux 程序被Killed，如何精准查看日志？
Linux 系统内存不足导致 Java 进程被杀掉
dejunyang的博客
06-28 7262
问题描述 测试环境 Tomcat + Java 部署的应用，应用进程总是莫名其妙的消失。 正确的问题排查 查看 /var/log/message 出现如下日志，标明，Linux 系统自身把 Java 进程杀掉了 Jun 28 02:58:27 hilife-dev001 kernel: Out of memory: Kill process 14561 (java) score 52 or sac...
linux下java进程被杀掉原因排查
Angus
03-16 6883
问题描述：我的java进程被异常终止。没有任何的异常信息。也没看到系统异常。 我们可以从linux层面来排查一下问题。如果确定程序没有问题的话，有可能是linux层面的问题，也有可能是硬件方面的问题。 查看linux系统日志：内容情况 命令 dmesg 看到的问题： 通过使用上边的命令，我们看到了进程确实是被系统给kill掉了。而发生这个操作的原因是：内存错误。 0x4e7a1c8: Killing java:4295 due to hardware memory corr.
java进程莫名被系统杀掉
有梦想的小程序员的博客
06-29 3787
场景：用springboot 开发的一个java程序部署到服务器上面，运行一段时间之后， 发现进程突然消失，没有错误日志打印，也没有内存溢出。查看服务器的状态还有部分内存。 原因：一直以为是程序问题导致的内存不够，程序挂掉了，各种查找之后发现并没有内存泄漏的问题，后来通过网上搜索可能是linux自动把进程杀掉了，查看被系统杀掉进程日志的命令： egrep -i -r 'killed process' /var/log （只有root权限才可以查看），发现确实有被杀掉的进程，而且时间也对的上，到这知..
Linux java进程无故被kill
weixin_30666753的博客
06-28 2861
Linux java进程无故被kill 这两天，演示环境的java应用无端端就被停止了。在这里记录一下原因和排查过程： 发现应用挂掉以后，第一时间登陆centos，发现进程没有了。于是重新启动应用。 但是启动不起来，去看业务日志，没有找到任何堆栈信息。 后来，在同事的指导下，找到了jdk的错误日志（如果没有指定，通常生产在应用的bin目录...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值