一文带你了解 Grafana 最新开源项目 Mimir 的前世今生

就在前几天(2022/3/29)Grafana 宣布正式对外开源其时序数据库 Mimir,一经开源便在社区引起广泛讨论,不仅 hacknews 上的讨论持续发热,而且 Github 上也迅速收获 1K 关注。

究竟是什么让它保持如此大的关注,是实力还是争议?

Mimir 是什么

Grafana Mimir is an open source, horizontally scalable, highly available, multi-tenant, long-term storage for Prometheus.
----- Mimir 官方是如此介绍

你没有看错,它又是一个时序数据库,又是解决 Prometheus 长期存储、横向扩展、多租户的问题。

虽然它号称完全兼容 Prometheus,但其目标绝不仅仅成为一个更好的 Prometheus, 它给自己的定位是成为可观测性中 metrics 后端存储的终极方案,能够兼容各种 metrics 协议,如图:

mimir.jpg

Mimir 的卖点

你可能要问,Prometheus 的长期存储社区方案那么多,Thanos、Cortex、 M3、Victoriametrics ,为何又来一个,时序数据库真的这么卷么?

我们先来看看 Mimir 自己宣传的一些卖点:

  • 超大规模生产验证(超 20 亿活跃指标)

  • 部署简单,支持单体/微服务两种部署方式,依赖少(只有 OSS, Cortex 的依赖你懂得)

  • 支持高基数的 metrics 压缩和查询

  • 支持同一租户 Block 分片压缩(超过 64G 限制)

  • 支持查询和计算下层

  • 天然支持多租户,并支持全局跨租户查询

  • 兼容所有 metircs 协议(目前主要支持 Prometheus)

那这些宣传的卖点真的值得我们迁移么?这个也是大家在 HN 上讨论的一个点,大致结论如下:

  • Cortex 太难用了,如果现在用的是 Cortex 可以尝试升级到 Mimir。
  • Thanos 目前工作的很好,除非遇到 高基数/ 大 Block 压缩问题等问题,否则没必要迁移。
  • VictoriaMetrics 工作的也很好,需要社区中立添加与 VictoriaMetrics 的对比测试,方便做选择。

针对以上观点,个人普遍认同。

与 Cortex 的关系

熟悉 Cortex 的同学收到 Grafana Mimir 开源的消息后,可能和我一样,第一直觉 Grafana 可能要放弃 Cortex 了,毕竟 Mimir 和 Cortex 做的事太像,而且 Cortex 以前的核心维护者大多(4/7)来自 Grafana。

cortex.png

首先 Mimir 确实是基于 Cortex 而来的,你可以理解它为 Cortex 的 2.0 版本,这也不难解释为啥 Mimir 开源的第一个版本就是 v2.0。

至于为什么这么做,我们可以从 HN 的讨论中看出原因:

  • Cortex 有较大技术债,很难满足 Mimir 中的一些需求
  • 开源协议的更改,更满足 Grafana 公司产品的发展,Cortex 属于 Apache-2.0 License, 而 Mimir 协议为 AGPLv3。

个人觉得协议的更改应该是决定因素,因为 AGPLv3 是目前 Grafana 主要使用的开源协议,可以参考【Grafana 开源协议更改 Q&A】 。

不过好像 CNCF 要求孵化的项目须为 Apache-2.0 License, 那未来 Mimir 如何进入 CNCF 进行孵化值得关注。

Grafana 真的要放弃 Cortex 了吗?

目前官方给的解释是,Cortex 会重新寻找新的维护者,原本的 Grafana 维护者需要将更多精力投入到 Mimir 中。

所以答案是肯定的,个人认为 Grafana 确实是要放弃 Cortex了,但这并不意味 Cortex 就停止维护,这很考验后继维护者。

Cortex 目前存在的价值就是存量用户和它 Apache-2.0 协议,万一哪天 Grafana 又来个协议修改,毕竟一家独大总不是太好。

是否值得学习

我个人觉得从架构上来看是值得的,原因如下:

完全分布式、良好伸缩能力和集群管理能力,对于我们通过 Thanos 手动搭建多租户的时序数据库有较好的参考意义。

对于一些卖点功能,比如单租户分片压缩、查询算子下推都可以好好学习(预计未来 Thanos 也会跟进)

总结

Mimir 其实可以算作 Cortex 2.0 版本,不过它将开源协议从 Apache-2.0 更新到了 AGPLv3,Grafana 的相关维护者后面会从 Cortex 的维护转移到 Mimir 。

Mimir 整体架构相对 Cortex 简化了不少,外部依赖,部署都好很多,这是一个不错的点,如果你以前用的就是 Cortex,建议参考其【Cortex 迁移指南】进行一键迁移 ,如果本身用的是 Thanos,建议再等等看。

Mimir 是否如它愿景--成为云原生时代可观测 metrics 的统一后端存储终极方案,我们拭目以待。

参考链接

  1. https://grafana.com/oss/mimir
  2. https://news.ycombinator.com/item?id=30854734
  3. https://grafana.com/blog/2021/04/20/qa-with-our-ceo-on-relicensing/
  4. https://grafana.com/docs/mimir/latest/migration-guide/migrating-from-cortex
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 220,809评论 6 513
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 94,189评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 167,290评论 0 359
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 59,399评论 1 294
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 68,425评论 6 397
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 52,116评论 1 308
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,710评论 3 420
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,629评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 46,155评论 1 319
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 38,261评论 3 339
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,399评论 1 352
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 36,068评论 5 347
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,758评论 3 332
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 32,252评论 0 23
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,381评论 1 271
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,747评论 3 375
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 45,402评论 2 358

推荐阅读更多精彩内容