排查elasticsearch的cpu居高不下,查询慢的问题

背景

近来es查询很慢,kibana的discover界面偶尔还会因为查询请求超时而无法显示数据。/_cat/indices?v 等对es的查询也慢的出奇,需要1、2分钟才返回结果。

排查

top命令看了es的java进程,发现cpu一直很高,130%左右,一直没有下降过。查看es的日志,发现gc.log中几乎每秒都要触发一次GC Full GC (Allocation Failure)。内存不够用,又没有内存可回收,所以GC也不断。怪不得CPU这么高,大部分时间都用在gc上面了。

处理

调整es可使用的内存大小。编辑config/jvm.options,调整了Xms和Xmx的大小,由原来默认的1g调整为10g。(官方建议这个值不要超过物理内存的50%,也不要超过32G。详见官网说明)接着重启es就好了。观察cpu,虽然偶尔也会彪上130%,但总体来说正常了,查询也变得很快。

ps:es重启后,需要观察logstash是否退出了。如果退出,需要重新把logstash拉起来。

pss:这次是小坑,后面可能还有很多大坑需要踩。后续有cpu高、查询慢的问题也一并归类到该文。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

相关阅读更多精彩内容

  • 概述 监控预警平台, eagle + eye (鹰眼)的合体词, 寓意可以快速发现问题, 并及时作出响应,Eagl...
    Kungfu猫熊阅读 12,175评论 0 52
  • 本人陆陆续续接触了ELK的1.4,2.0,2.4,5.0,5.2版本,可以说前面使用当中一直没有太多感触,最近使用...
    三杯水Plus阅读 9,580评论 0 12
  • 诗词史上失去挚爱后的名篇太多太多了。人生在世,一段历程,爱得越深失去时越是难以自拔解脱,但是也造就了很多很多千古名...
    青颜珠珠阅读 1,319评论 0 2
  • 说实话我原来挺疯的,小学的时候天天追着喜欢的男生跑,乐此不疲。现在偶尔会想起那段明亮的日子,不需要想太多的事...
    清池i阅读 1,261评论 0 0
  • 每次出去听产品大牛分享,看产品牛人写的文章,跟别人交流,都会频繁的被指导:不要为了设计功能而设计,要基于用户使用场...
    海星啊阅读 4,818评论 6 49

友情链接更多精彩内容