2019-06-21 虚拟机进程经常触发OOM，被物理机杀死问题与解决方案

Jun 19 17:28:17 localhost kernel: Node 1 Normal: 3323*4kB (UEM) 2500*8kB (UEM) 876*16kB (UEM) 5*32kB (U) 0*64kB 0*128kB 0*256kB 0*512kB 0*1024kB 0*2048kB 0*4096kB = 47468kB
Jun 19 17:28:17 localhost kernel: Node 0 hugepages_total=0 hugepages_free=0 hugepages_surp=0 hugepages_size=1048576kB
Jun 19 17:28:17 localhost kernel: Node 0 hugepages_total=0 hugepages_free=0 hugepages_surp=0 hugepages_size=2048kB
Jun 19 17:28:17 localhost kernel: Node 1 hugepages_total=0 hugepages_free=0 hugepages_surp=0 hugepages_size=1048576kB
Jun 19 17:28:17 localhost kernel: Node 1 hugepages_total=0 hugepages_free=0 hugepages_surp=0 hugepages_size=2048kB
Jun 19 17:28:17 localhost kernel: 480 total pagecache pages
Jun 19 17:28:17 localhost kernel: 26 pages in swap cache
Jun 19 17:28:17 localhost kernel: Swap cache stats: add 29067141, delete 29136938, find 10318233/18235303
Jun 19 17:28:17 localhost kernel: Free swap  = 32026832kB
Jun 19 17:28:17 localhost kernel: Total swap = 32972796kB
Jun 19 17:28:17 localhost kernel: 16752732 pages RAM
Jun 19 17:28:17 localhost kernel: 0 pages HighMem/MovableOnly
Jun 19 17:28:17 localhost kernel: 332320 pages reserved
Jun 19 17:28:17 localhost kernel: [ pid ]   uid  tgid total_vm      rss nr_ptes swapents oom_score_adj name
Jun 19 17:28:17 localhost kernel: [ 4749]     0  4749    37475        0      75     1123             0 systemd-journal
Jun 19 17:28:17 localhost kernel: [ 4772]     0  4772    50268        0      31      728             0 lvmetad
Jun 19 17:28:17 localhost kernel: [ 4780]     0  4780    11787        1      25      686         -1000 systemd-udevd
Jun 19 17:28:17 localhost kernel: [ 9122]     0  9122    12256        0      24      123         -1000 auditd
Jun 19 17:28:17 localhost kernel: [ 9160]     0  9160    83533        0      83     3709             0 firewalld
Jun 19 17:28:17 localhost kernel: [ 9164]    81  9164     8200        0      17      146          -900 dbus-daemon
Jun 19 17:28:17 localhost kernel: [ 9172]     0  9172     6593        0      19       87             0 systemd-logind
Jun 19 17:28:17 localhost kernel: [ 9173]     0  9173     5413        0      14      111             0 irqbalance
Jun 19 17:28:17 localhost kernel: [ 9174]     0  9174    77540        0      79      228             0 rsyslogd
Jun 19 17:28:17 localhost kernel: [ 9177]     0  9177   141927        0      96     3203             0 tuned
Jun 19 17:28:17 localhost kernel: [ 9178]    70  9178     7036        0      20       84             0 avahi-daemon
Jun 19 17:28:17 localhost kernel: [ 9183]     0  9183    31048        0      19      164             0 crond
Jun 19 17:28:17 localhost kernel: [ 9185]    70  9185     7005        0      19       59             0 avahi-daemon
Jun 19 17:28:17 localhost kernel: [ 9396]     0  9396   116870        0      76      583             0 NetworkManager
Jun 19 17:28:17 localhost kernel: [ 9490]   999  9490   133097        0      59     2065             0 polkitd
Jun 19 17:28:17 localhost kernel: [ 9860]     0  9860    25466        0      50     3123             0 dhclient
Jun 19 17:28:17 localhost kernel: [ 9875]     0  9875    25466        0      50     3115             0 dhclient
Jun 19 17:28:17 localhost kernel: [ 9889]     0  9889    25466        0      50     3110             0 dhclient
Jun 19 17:28:17 localhost kernel: [ 9904]     0  9904    25466        0      51     3114             0 dhclient
Jun 19 17:28:17 localhost kernel: [10116]     0 10116    20078        0      42      232         -1000 sshd
Jun 19 17:28:17 localhost kernel: [10190]     0 10190     1633        0       8       29             0 iprupdate
Jun 19 17:28:17 localhost kernel: [10191]     0 10191     1633        0       9       30             0 iprinit
Jun 19 17:28:17 localhost kernel: [10285]     0 10285     9793        0       8       24             0 iprdump
Jun 19 17:28:17 localhost kernel: [10374]     0 10374    22265        0      42      284             0 master
Jun 19 17:28:17 localhost kernel: [10377]    89 10377    22308        0      43      272             0 qmgr
Jun 19 17:28:17 localhost kernel: [10574]     0 10574    27523        0      10       32             0 agetty
Jun 19 17:28:17 localhost kernel: [40277]     0 40277    71335        0      54      570             0 VBoxXPCOMIPCD
Jun 19 17:28:17 localhost kernel: [40283]     0 40283   226145        0      80     2477             0 VBoxSVC
Jun 19 17:28:17 localhost kernel: [46020]     0 46020  7965739  7409607   14684    43310             0 VBoxHeadless
Jun 19 17:28:17 localhost kernel: [47415]     0 47415  8035492  7479402   14821    43240             0 VBoxHeadless
Jun 19 17:28:17 localhost kernel: [49162]     0 49162  1471349  1018533    2385   103763             0 VBoxHeadless
Jun 19 17:28:17 localhost kernel: [50817]    89 50817    22291        0      45      259             0 pickup
Jun 19 17:28:17 localhost kernel: Out of memory: Kill process 47415 (VBoxHeadless) score 296 or sacrifice child
Jun 19 17:28:17 localhost kernel: Killed process 47415 (VBoxHeadless) total-vm:32141968kB, anon-rss:0kB, file-rss:29917608kB, shmem-rss:0kB
Jun 19 17:28:17 localhost kernel: VBoxDrvLinuxIOCtl: copy_to_user(0x7ffb37282c70,,0x18); uCmd=0xc0305698!
Jun 19 17:28:17 localhost kernel: VBoxDrvLinuxIOCtl: copy_to_user(0x7ffb37181c70,,0x18); uCmd=0xc0305698!
Jun 19 17:28:17 localhost kernel: VBoxDrvLinuxIOCtl: copy_to_user(0x7ffb36c7cc70,,0x18); uCmd=0xc0305698!
Jun 19 17:28:17 localhost kernel: VBoxDrvLinuxIOCtl: copy_to_user(0x7ffb37080c70,,0x18); uCmd=0xc0305698!
Jun 19 17:28:17 localhost kernel: VBoxDrvLinuxIOCtl: copy_to_user(0x7ffb36b7bc70,,0x18); uCmd=0xc0305698!
Jun 19 17:28:17 localhost kernel: VBoxDrvLinuxIOCtl: copy_to_user(0x7ffb36979c70,,0x18); uCmd=0xc0305698!
Jun 19 17:28:17 localhost kernel: VBoxDrvLinuxIOCtl: copy_to_user(0x7ffb36a7ac70,,0x18); uCmd=0xc0305698!
Jun 19 17:28:17 localhost kernel: VBoxDrvLinuxIOCtl: copy_to_user(0x7ffb36d7dc70,,0x18); uCmd=0xc0305698!
Jun 19 17:28:17 localhost kernel: VBoxDrvLinuxIOCtl: copy_to_user(0x7ffb045ebda0,,0x18); uCmd=0xc0305698!
Jun 19 17:28:17 localhost kernel: VBoxDrvLinuxIOCtl: copy_to_user(0x7ffb04811da0,,0x18); uCmd=0xc0305698!
Jun 19 17:28:17 localhost kernel: VBoxDrvLinuxIOCtl: copy_to_user(0x7ffb36e7ec90,,0x30); uCmd=0xc0305687!
Jun 19 17:28:17 localhost kernel: VBoxDrvLinuxIOCtl: copy_to_user(0x7ffb04373db0,,0x18); uCmd=0xc0305698!
Jun 19 17:28:17 localhost kernel: VBoxDrvLinuxIOCtl: copy_to_user(0x7ffb36777c70,,0x18); uCmd=0xc0305698!
Jun 19 17:28:17 localhost kernel: VBoxDrvLinuxIOCtl: copy_to_user(0x7ffb36878c70,,0x18); uCmd=0xc0305698!
Jun 19 17:28:17 localhost kernel: tuned invoked oom-killer: gfp_mask=0x200da, order=0, oom_score_adj=0
Jun 19 17:28:17 localhost kernel: tuned cpuset=/ mems_allowed=0-1
Jun 19 17:28:17 localhost kernel: CPU: 7 PID: 9287 Comm: tuned Kdump: loaded Tainted: G           OE  ------------   3.10.0-957.12.1.el7.x86_64 #1
Jun 19 17:28:17 localhost kernel: Hardware name: Dell Inc. PowerEdge R730/072T6D, BIOS 2.8.0 005/17/2018
 active_file:31 inactive_file:1121 isolated_file:0
 unevictable:18 dirty:7 writeback:19 unstable:0
 slab_reclaimable:125382 slab_unreclaimable:170275
 mapped:15283635 shmem:0 pagetables:33115 bounce:0
 free:55900 free_pcp:491 free_cma:0


方案一 禁掉oom，可能会导致系统挂起
方案二 分配给虚拟机更小的内存，否则虚拟机还是会逐渐占用更多的内存，然后让主机OOM(最优)
发现是虚拟机分配多少内存，就会预占物理机多少内存，而虚拟机分配的内存过多，导致虚拟机的今后才能被杀，重新配置虚拟机的内存之后，虚拟机运行正常
方案三 定期清理缓存和释放内存，crontab？ 效果不好，还是挡不住virtualbox抢占内存 echo 3 > /proc/sys/vm/drop_caches

人面猴
序言：七十年代末，一起剥皮案震惊了整个滨河市，随后出现的几起案子，更是在滨河造成了极大的恐慌，老刑警刘岩，带你破解...
沈念sama阅读 213,558评论 6赞 492
死咒
序言：滨河连续发生了三起死亡事件，死亡现场离奇诡异，居然都是意外死亡，警方通过查阅死者的电脑和手机，发现死者居然都...
沈念sama阅读 91,002评论 3赞 387
救了他两次的神仙让他今天三更去死
文/潘晓璐我一进店门，熙熙楼的掌柜王于贵愁眉苦脸地迎上来，“玉大人，你说我怎么就摊上这事。” “怎么了？”我有些...
开封第一讲书人阅读 159,036评论 0赞 349
道士缉凶录：失踪的卖姜人
文/不坏的土叔我叫张陵，是天一观的道长。经常有香客问我，道长，这世上最难降的妖魔是什么？我笑而不...
开封第一讲书人阅读 57,024评论 1赞 285
港岛之恋（遗憾婚礼）
正文为了忘掉前任，我火速办了婚礼，结果婚礼上，老公的妹妹穿的比我还像新娘。我一直安慰自己，他们只是感情好，可当我...
茶点故事阅读 66,144评论 6赞 385
恶毒庶女顶嫁案：这布局不是一般人想出来的
文/花漫我一把揭开白布。她就那样静静地躺着，像睡着了一般。火红的嫁衣衬着肌肤如雪。梳的纹丝不乱的头发上，一...
开封第一讲书人阅读 50,255评论 1赞 292
城市分裂传说
那天，我揣着相机与录音，去河边找鬼。笑死，一个胖子当着我的面吹牛，可吹牛的内容都是我干的。我是一名探鬼主播，决...
沈念sama阅读 39,295评论 3赞 412
双鸳鸯连环套：你想象不到人心有多黑
文/苍兰香墨我猛地睁开眼，长吁一口气：“原来是场噩梦啊……” “哼！你这毒妇竟也来了？” 一声冷哼从身侧响起，我...
开封第一讲书人阅读 38,068评论 0赞 268
万荣杀人案实录
序言：老挝万荣一对情侣失踪，失踪者是张志新（化名）和其女友刘颖，没想到半个月后，有当地人在树林里发现了一具尸体，经...
沈念sama阅读 44,478评论 1赞 305
护林员之死
正文独居荒郊野岭守林人离奇死亡，尸身上长有42处带血的脓包…… 初始之章·张勋以下内容为张勋视角年9月15日...
茶点故事阅读 36,789评论 2赞 327
白月光启示录
正文我和宋清朗相恋三年，在试婚纱的时候发现自己被绿了。大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
茶点故事阅读 38,965评论 1赞 341
活死人
序言：一个原本活蹦乱跳的男人离奇死亡，死状恐怖，灵堂内的尸体忽然破棺而出，到底是诈尸还是另有隐情，我是刑警宁泽，带...
沈念sama阅读 34,649评论 4赞 336
日本核电站爆炸内幕
正文年R本政府宣布，位于F岛的核电站，受9级特大地震影响，放射性物质发生泄漏。R本人自食恶果不足惜，却给世界环境...
茶点故事阅读 40,267评论 3赞 318
男人毒药：我在死后第九天来索命
文/蒙蒙一、第九天我趴在偏房一处隐蔽的房顶上张望。院中可真热闹，春花似锦、人声如沸。这庄子的主人今日做“春日...
开封第一讲书人阅读 30,982评论 0赞 21
一桩弑父案，背后竟有这般阴谋
文/苍兰香墨我抬头看了看天上的太阳。三九已至，却和暖如春，着一层夹袄步出监牢的瞬间，已是汗流浃背。一阵脚步声响...
开封第一讲书人阅读 32,223评论 1赞 267
情欲美人皮
我被黑心中介骗来泰国打工，没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留，地道东北人。一个月前我还...
沈念sama阅读 46,800评论 2赞 365
代替公主和亲
正文我出身青楼，却偏偏与公主长得像，于是被迫代替她去往敌国和亲。传闻我的和亲对象是个残疾皇子，可洞房花烛夜当晚...
茶点故事阅读 43,847评论 2赞 351

2019-06-21 虚拟机进程经常触发OOM，被物理机杀死问题与解决方案

推荐阅读更多精彩内容