什么是core
Linux 程序接收到某些signal时退出，生成的退出瞬间的内存镜像。
core 文件可用来进行debugger
如何配置使系统生成core
ulimit -c unlimited
如果想自定义core的大小将unlimited换成数值，比如1024（M）
kernel.core_pattern = /mnt/core/core-%e-%p-%t.core
生成core的路径和格式
kernel.core_pipe_limit = 4
允许同时生成core的进程数
kernel.core_uses_pid = 1
注意：
如上配置只是临时的，永久生效可以写在/etc/profile & /etc/sysctl.conf & /etc/security/limits.conf中
注意存储core文件的目录有权限
参考https://www.cnblogs.com/xuxm2007/archive/2010/10/22/1858095.html
生成运行程序的core文件
gcore –a –o xxx.core <pid>
centos自带工具
分析、生成 c/c++ crash 进程的插件，centos 自带
捕获异常：abrt-hook-ccpp/ abrt-server
配置文件 ：/etc/abrt/abrt.conf --- core 保存位置、大小、级别等
/etc/abrt/plugins/CCpp.conf ----core 保存方式、存储大小等
分析异常：abrt-action-analyze-ccpp-local---下载debuginfo包，生成coredump backtrace， 检查bugzilla
abrt-action-generate-backtrace---分析coredump，保存生成backtrace
参考文档：https://www.mankier.com/package/abrt-addon-ccpp
https://abrt.readthedocs.io/en/latest/
如何分析core
gdb binary-file xxx.core
https://blog.csdn.net/Roland_Sun/article/details/42460663
注：
1） 生成core的二进制文件-g 编译 或 有符号表、maps信息 或 有debug包
http://blog.kankanan.com/article/linux- 4e0b8c038bd5526553bb8c038bd54fe1606f76847a0b5e8f5d296e83.html
2） 最好在本机或者相同环境上调试
确定崩溃原因
确定堆栈
bt
查找出错堆栈对应行号
nm /addr2line/ (gdb) l * addr/ fun_name
确定异常地址所属
info proc mappings
vmcore
内核参数配置
临时配置
https://www.kernel.org/doc/html/v4.14/admin-guide/kernel-parameters.html
内核参数配置---永久生效
grub.cfg & /etc/sysctl.conf
https://learn-linux.readthedocs.io/zh_CN/latest/administration/kernel/sysctl.html
kdump 用来捕获内核异常, 并进行转储
https://www.ibm.com/developerworks/cn/linux/l-cn-kdump1/index.html
http://linuxperf.com/?p=172
使用kexec
加载第二内核， 在异常时进入第二内核
提供kexec-tools 用户态工具 ： kdumpctl /crash
配置文件 /etc/kdump.conf
https://linux.die.net/man/5/kdump.conf
mkdumprd
创建 initramfs-xxxx-kdump.img. 将/proc/vmcore 复制到制定位置
https://linux.die.net/man/8/mkdumprd
分析vmcore
安装 对应内核debuginfo包
安装 crash 工具
常用crash 命令:
http://man7.org/linux/man-pages/man8/crash.8.html
分析
https://blog.csdn.net/guowenyan001/article/details/19807555
https://people.redhat.com/pladd/NYRHUG_kdump_and_intro_to_vmcore_analysis.pdf
实例
http://linuxperf.com/?cat=12
