crashdumpandroid_Android Stability - crash 和 ramdump

跟coredump文件一样，ramdump文件也是内存转储文件，但是ramdump文件更大，因为它几乎是对整个物理内存的镜像，除了一些security类型的memory抓不出来之外，几乎所有的dram都被抓下来，有些问题的复现概率低，而且有些问题是由于踩内存导致的，这种问题靠log往往是无法分析出来的，所以如果可以在问题发生时候把内存镜像保存下来，对于分析问题是很有帮助的。

MTK平台抓ramdump的方法

因为每个平台抓取ramdump的方式都不一样，所以这里以MTK平台作为示例，在MTK平台上面，user/user debug build抓取ramdump的方法如下所示，

另外由于MTK平台和Android、Kernel的升级，下面的这个方式也不一定会有用，如果抓取不了可以咨询芯片厂家。

第1步：修改LK的make file "bootable/bootloader/lk/app/mt_boot/rules.mk"

build_mt_ramdump := yes ##原先是no，这里修改为yes

ifneq ($(TARGET_BUILD_VARIANT),user)

ifeq ($(ARCH_HAVE_MT_RAMDUMP),yes)

build_mt_ramdump := yes

endif

endif

第2步：修改user-build kernel config(kernel/arch/arm/configs/xxx_defconfig或

kernel/arch/arm64/configs/xxx_defconfig)把(没有对应的config则不需要修改)

# CONFIG_MTK_AEE_MRDUMP is not set

# CONFIG_HAVE_DDR_RESERVE_MODE is not set

修改为enable

CONFIG_MTK_AEE_MRDUMP=y

CONFIG_HAVE_DDR_RESERVE_MODE=y

第3步：编译下载后复现时请打开mtklogger，如果没有打开也不会抓ramdump。

crash工具介绍

同GDB工具一样，crash也是一个很有用的分析工具，它的官网crash，当前最新的版本为7.2.3,最新的版本支持ARM64平台，将代码下载下来之后解压，编译支持arm64的版本

taotaomami@taotaomami$ ls

alpha.c dev.c gdb_interface.c lkcd_dump_v7.h lkcd_x86_trace.c netdump.h s390dbf.c unwind.c vmware_vmss.c xen_hyper_dump_tables.c

arm64.c diskdump.c global_data.c lkcd_dump_v8.h lkcd_x86_trace.h ppc64.c s390_dump.c unwind_decoder.c vmware_vmss.h xen_hyper_global_data.c

arm.c diskdump.h help.c lkcd_fix_mem.c main.c ppc.c s390x.c unwind.h x86_64.c

binqQtgK4pQ66.bin extensions ia64.c lkcd_fix_mem.h makedumpfile.c qemu.c sadump.c unwind_i.h x86.c

build_data.c extensions.c ibm_common.h lkcd_v1.c makedumpfile.h qemu-load.c sadump.h unwind_x86_32_64.c xen_dom0.c

cmdline.c filesys.c ipcs.c lkcd_v2_v3.c Makefile qemu-load.h sparc64.c unwind_x86_64.h xen_dom0.h

configure gdb-7.6 kernel.c lkcd_v5.c memory.c ramdump.c symbols.c unwind_x86.h xendump.c

configure.c gdb-7.6.patch kvmdump.c lkcd_v7.c memory_driver README task.c vas_crash.h xendump.h

COPYING3 gdb-7.6-ppc64le-support.patch kvmdump.h lkcd_v8.c mips.c remote.c test.c va_server.c xen_hyper.c

crash.8 gdb-7.6.tar.gz lkcd_common.c lkcd_vmdump_v1.h net.c rse.h tools.c va_server.h xen_hyper_command.c

defs.h gdb.files lkcd_dump_v5.h lkcd_vmdump_v2_v3.h netdump.c s390.c unwind_arm.c va_server_v1.c xen_hyper_defs.h

taotaomami@taotaomami$ make target=arm64

TARGET: ARM64

CRASH: 7.1.7++

GDB: 7.6

gcc -g -O2 -I. -I. -I./common -I./config -DLOCALEDIR="\"/usr/local/share/locale\"" -DCRASH_MERGE -DHAVE_CONFIG_H -I./../include/opcode -I./../opcodes/.. -I./../readline/.. -I../bfd -I./../bfd -I./../include -I../libdecnumber -I./../libdecnumber -I./gnulib/import -Ibuild-gnulib/import -DTUI=1 -Wall -Wdeclaration-after-statement -Wpointer-arith -Wformat-nonliteral -Wno-pointer-sign -Wno-unused -Wunused-value -Wunused-function -Wno-switch -Wno-char-subscripts -Wmissing-prototypes -Wdeclaration-after-statement -Wempty-body -c -o symtab.o -MT symtab.o -MMD -MP -MF .deps/symtab.Tpo symtab.c

Making init.c

gcc -g -O2 -I. -I. -I./common -I./config -DLOCALEDIR="\"/usr/local/share/locale\"" -DCRASH_MERGE -DHAVE_CONFIG_H -I./../include/opcode -I./../opcodes/.. -I./../readline/.. -I../bfd -I./../bfd -I./../include -I../libdecnumber -I./../libdecnumber -I./gnulib/import -Ibuild-gnulib/import -DTUI=1 -Wall -Wdeclaration-after-statement -Wpointer-arith -Wformat-nonliteral -Wno-pointer-sign -Wno-unused -Wunused-value -Wunused-function -Wno-switch -Wno-char-subscripts -Wmissing-prototypes -Wdeclaration-after-statement -Wempty-body -c -o init.o -MT init.o -MMD -MP -MF .deps/init.Tpo init.c

cc -c -g -DARM64 -DGDB_7_6 build_data.c

cc -c -g -DARM64 -DGDB_7_6 main.c

cc -c -g -DARM64 -DGDB_7_6 tools.c

cc -c -g -DARM64 -DGDB_7_6 global_data.c

cc -c -g -DARM64 -DGDB_7_6 memory.c

cc -c -g -DARM64 -DGDB_7_6 filesys.c

cc -c -g -DARM64 -DGDB_7_6 help.c

cc -c -g -DARM64 -DGDB_7_6 task.c

cc -c -g -DARM64 -DGDB_7_6 kernel.c

cc -c -g -DARM64 -DGDB_7_6 test.c

cc -c -g -DARM64 -DGDB_7_6 gdb_interface.c

cc -c -g -DARM64 -DGDB_7_6 net.c

cc -c -g -DARM64 -DGDB_7_6 dev.c

cc -c -g -DARM64 -DGDB_7_6 alpha.c

cc -c -g -DARM64 -DGDB_7_6 x86.c -DMCLX

编译完成之后会在当前目录下生成crash可执行文件，执行这个文件就可以分析ramdump了，分析ramdump的时候除了ramdump文件之外，还需要一个vmlinux文件，这个文件就是内核的symbole文件。

taotaomami@taotaomami$ crash vmlinux SYS_COREDUMP

crash 7.1.7++

Copyright (C) 2002-2016 Red Hat, Inc.

Copyright (C) 2004, 2005, 2006, 2010 IBM Corporation

Copyright (C) 1999-2006 Hewlett-Packard Co

Copyright (C) 2005, 2006, 2011, 2012 Fujitsu Limited

Copyright (C) 2006, 2007 VA Linux Systems Japan K.K.

Copyright (C) 2005, 2011 NEC Corporation

Copyright (C) 1999, 2002, 2007 Silicon Graphics, Inc.

Copyright (C) 1999, 2000, 2001, 2002 Mission Critical Linux, Inc.

This program is free software, covered by the GNU General Public License,

and you are welcome to change it and/or distribute copies of it under

certain conditions. Enter "help copying" to see the conditions.

This program has absolutely no warranty. Enter "help warranty" for details.

GNU gdb (GDB) 7.6

Copyright (C) 2013 Free Software Foundation, Inc.

License GPLv3+: GNU GPL version 3 or later

This is free software: you are free to change and redistribute it.

There is NO WARRANTY, to the extent permitted by law. Type "show copying"

and "show warranty" for details.

This GDB was configured as "--host=x86_64-unknown-linux-gnu --target=aarch64-elf-linux"...

跟GDB工具一样，crash也有自己的命令帮助，这里就不去赘述了，感兴趣的童鞋可以一个一个的去看，这里还是跟前面一样通过对一个问题的分析来介绍crash、ramdump是如何帮助我们分析问题的。

crash> help

* files mach repeat timer

alias foreach mod runq tree

ascii fuser mount search union

bt gdb net set vm

btop help p sig vtop

dev ipcs ps struct waitq

dis irq pte swap whatis

eval kmem ptob sym wr

exit list ptov sys q

extend log rd task

crash version: 7.1.7++ gdb version: 7.6

For help on any command above, enter "help ".

For help on input options, enter "help input".

For help on output options, enter "help output".

问题背景

在某个机型上面，跑monkey，跑一段时间之后差不多所有机器都会卡住，卡住的时候没法连接adb和串口，更坑人的是重启之后发现SD卡下面保存log的目录只保留了很少的一部分，后面的log都没有了，我们只能通过/data/anr下面的trace文件看到一点信息

"Binder_1" prio=5 tid=8 Blocked

| group="main