mongo(十六:监控)

mongodb监控可以通过直接使用官方工具或整合第三方平台实现,当然也可以自己编写程序脚本

• MongoDB Ops Manager
• Percona
• 通用监控平台
• 程序脚本

监控信息的来源:
• db.serverStatus()(主要)
• db.isMaster()(次要)
• mongostats 命令行工具(只有部分信息)

注意:db.serverStatus() 包含的监控信息是从上次开机到现在为止的累计数据,因此不能简单使用。

serverStatus() 主要信息

• connections: 关于连接数的信息;
• locks: 关于 MongoDB 使用的锁情况;
• network: 网络使用情况统计;
• opcounters: CRUD 的执行次数统计;
• repl: 复制集配置信息;
• wiredTiger: 包含大量 WirdTiger 执行情况的信息:
  • block-manager: WT 数据块的读写情况;
  • session: session 使用数量;
  • concurrentTransactions: Ticket 使用情况;
• mem: 内存使用情况;
• metrics: 一系列性能指标统计信息;
https://docs.mongodb.com/manual/reference/command/serverStatus/

建议监控指标



mongo性能检测工具mongostat

Much of the output of serverStatus is also displayed dynamically by mongostat.

mongostat: 用于了解 MongoDB 运行状态的工具


https://www.applenice.net/2019/12/14/MongoDB-Notes-02/
https://pinocc.cn/2020/01/28/mongodb-%E6%80%A7%E8%83%BD%E5%88%86%E6%9E%90/
dirty: 仅仅针对WiredTiger引擎,脏数据字节的缓存百分比
used:仅仅针对WiredTiger引擎,正在使用中的缓存百分比
当used 远远大于dirty 工作集大小大于缓存大小,说明当前大批量数据写入,内存吃紧
https://zhuanlan.zhihu.com/p/370520050
image.png

问题诊断工具 - mongotop

image.png

总时间消耗 读时间消耗 写时间消耗
可以直观看到列表是耗时倒叙的,可以知道那张表最耗时,耗时原因是read还是write

Profiling

类似于MySQL的slow log, mongodb可以监控所有慢的以及不慢的查询。这个工具就是Profiling,该工具在运行的实例上收集有关MongoDB的 写操作,游标,数据库命令等,可以在数据库级别开启该工具,也可以在实例级别开启。该工具会把收集到的所有都写入到system.profile集合中,该集合是一个capped collection。Profiling功能肯定是会影响效率的,但是不太严重,原因是他使用的是system.profile 来记录,而system.profile 是一个capped collection, 这种collection 在操作上有一些限制和特点,但是效率更高。
MongoDB 支持 Capped Collection,一种固定大小的集合,当集合的大小达到指定大小时,新数据覆盖老数据,MongoDB Replica set 中的 oplog 就是 Capped Collection 类型。

查看级别 PRIMARY> db.getProfilingLevel()
级别说明:
0:关闭,不收集任何数据。
1:收集慢查询数据,默认是100毫秒。
2:收集所有数据
设置级别 PRIMARY> db.setProfilingLevel(2)
{ "was" : 1, "slowms" : 100, "ok" : 1 } #这里返回的是上一次的设置
查看profile信息:db.system.profile.find().limit(10).sort({ts:-1}).pretty()


  1. 如果发现 millis 值比较大,那么就需要作优化。
  2. 如果docsExamined数很大,或者接近记录总数(文档数),那么可能没有用到索引查询,而是全表扫描。
  3. 如果keysExamined数为0,也可能是没用索引。
  4. 结合 planSummary 中的显示,上例中是 "COLLSCAN, COLLSCAN" 确认是全表扫描
  5. 如果 keysExamined 值高于 nreturned 的值,说明数据库为了找到目标文档扫描了很多文档。这时可以考虑创建索引来提高效率。
  6. 索引的键值选择可以根据 query 中的输出参考,上例中 filter:包含了 jzrq和jglxfldm 并且按照RsId排序,所以我们的索引可以这么建: db.f10_2_8_3_jgcc.ensureindex({jzrq:1,jglxfldm:1,RsId:1})

https://www.cnblogs.com/chinesern/p/7427967.html
也可以配置Prometheus对mongo进行监控 https://www.jianshu.com/p/66ee2ed8cabb

db.currentOp()
currentOp: 这个命令可以查看当前系统所有的操作信息,包括 find insert update remove等
下面是剔除了无关命令以及部分字段的一条记录

通过currentOp可以方便地查看当前数据库有哪些命令执行有异常,从而针对性做出优化。当然,它还有一个用途,比如某个天气晴朗的好日子,一个新来的临时工在生产上执行了一条不可描述的语句,将整个数据库给阻塞住了,线上相关项目停摆,大量用户热火朝天开始拨出投诉电话,就在大家火急火燎地接待解释时,优雅的你,只是随手执行了一下这个语句:
db.killOp(99080)
很好,一切恢复正常,继续喝茶聊天。
https://www.huaweicloud.com/articles/12625764.html

默认情况下mongod进程可以支持65536个连接,可有时候不到这个连接数就连接失败,可以查看db.serverStatus().connections 和ulimit -a找原因

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 218,525评论 6 507
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,203评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,862评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,728评论 1 294
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,743评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,590评论 1 305
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,330评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,244评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,693评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,885评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,001评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,723评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,343评论 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,919评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,042评论 1 270
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,191评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,955评论 2 355

推荐阅读更多精彩内容