从数据角度看新版本覆盖速度

问题由来

新版本覆盖速度,这个概念说起来大家都不会陌生。在每次发布新版本的时候大家都会十分留意新版本的覆盖情况。特别进行了比较重要的更新之后,我们也经常会受到来自各方面需要提高新版本覆盖速度的要求。

想要提升覆盖速度,那么首先要面对的是,如何将这个版本覆盖速度进行量化。

其实这个问题,说来可以很简单,比如可以说成“xx天之后,新版本活跃用户超过总量一半”。但如果仔细去考虑,这样评估有很多不准确的地方。第一,灰度量是我们自己控制的,灰度放的快或慢,这会根本上影响覆盖速度;第二,在买量或者新增用户数量波动较大的时候,也会影响到覆盖速度,大多老用户升级都不会很及时,但是新增用户的版本可以看作是按照灰度量分布的。新增越多,升级越快。

更新事件的角度

如果将新老用户进行拆分,也就是将安装事件和更新事件进行拆分。那么这个指标看起来就清晰了很多。安装事件其实我们并不需要去关心,有多少新用户用到新版本,这就是我们的灰度量,我们可以充分控制 。我们只要关心的重点放在更新事件就可以了。

更新事件这一指标,在谷歌后台版本信息中心查看到,可以在配置报告中,选择更新事件,维度选择应用版本,将数据下载至本地。

这里要注意的是,谷歌后台给出的更新事件,是在升级完成后上报进行上报。也就是我们看到的是最新版本中有多少人是升级上来的。这也就带来一个问题,我们无法将每个更新事件追溯到用户之前用的版本,也就是我们无法直接得到“旧版本中有多少人进行了更新”。

不过我们仍然可以将这个指标拆分一下:老用户旧版本升级比例=老用户旧版本更新事件量/(老用户旧版本用户总量+老用户旧版本更新时间量)

(1)因为上报了更新事件的,在更新前也是这一天的旧版本老用户,所以计算时应该把更新事件量算回到分母中去
(2)在这里,我们只讨论更新与不更新的行为。老用户的留存长期都是稳定的数据(90%+),因此在这里(也只能)忽略掉有老用户的卸载的情况
(3)谷歌后台是不会区分新老用户的,在实际计算中,我将“旧版本的Active Device Installs-旧版本的Daily Device Installs”,视为旧版本老用户总量

以我们九月份所发布的1.6.1版本数据举例,所计算出的,旧版本中老用户升级行为比例,以及每天所设置的灰度量如下图所示:


旧版本老用户升级行为占比
旧版本老用户升级行为占比

我们可以看出,每一次增加灰度量,都会使得老用户升级比例得到明显提升,并且在一天之后迅速衰减。我们可以做这样一个假设,提升灰度量第一天就升级的用户,大概就是可以通过谷歌后台自动更新的用户。对老用户来说,在某个量级上灰度三天还是灰度五天,没有多大差别。能够及时升级的老用户,给一两天时间基本就都升级上来了。

版本比例的角度

之前所讨论的,是属于比较微观的,针对到用户升级行为层面。

那我们直接从宏观的版本分布层面,直接用版本分布的比例进行统计。为了保证数据源的一致性,我们还是选择GP后台的数据。

相比于计算老用户升级行为比例,各版本覆盖情况在Excel中很容易得到。installs_包名_月份_app_version这份表格中,进行数据透视时,行和列选择“Date”和“App version code”,值选择“求和项:Active Device Installs”,并且在值显示方式中选择“行汇总百分比”,就可以直接得到每一天各个版本所占比例。(当然同样的方式也可以用于我们自己后台导出的数据)

仍然用v1.6.1版本的数据来看:

新版本比例
新版本比例

前三天我们灰度量是30%,在开始发布三天后,版本覆盖比例达到了14.33%。第四天灰度量为50%,第五天开始100%全量发布。可以看到,在每一次提升灰度量的时候都会让版本覆盖程度有着明显的提升。而这也和我们之前通过升级事件得到的结果想吻合。

另外,从第五天之后,该版本开始全量发布,在此之后的覆盖比例曲线,看起来像是非常平滑的对数形式的曲线。我们也可以利用Excel的趋势线功能进行拟合。甚至可以得到发布天数与版本覆盖比例的公式:

发布天数与新版本比例的关系
发布天数与新版本比例的关系

提升覆盖速度的一些思路

所以我们也可以看出,想提升新版本的覆盖速度,最有效的方法就是一句废话,快点放量。直接上全量,肯定覆盖的最快。这是提升速度的最大瓶颈。但这有时候很难做到,毕竟灰度期间对比数据差异是非常重要的事情。

当然还有第二有效的方法,也是废话,发了新版多买量。老用户能够及时自动更新的比例很有限,从之前数据上估算,这个比例不会超过一半。但是这也执行起来也不容易,而且也只是对新产品起效。

那么就是否有一种,即方便我们对比数据,又能使得老用户的升级过程不至于太慢呢?

在这里,我提出一个假设。从第一张表中我们能看到,提升一次灰度量级,就会使得老用户升级比例提升一大截。那么是否可以通过,均匀增加灰度量级,来使得老用户升级比例始终保持在一个较高的水平上?之前自己的产品发灰度有时候很由着性子,有时在一个量级灰上好几天,看数据觉得差不多了突然从30%提到100%。其实这样做,30%这样的灰度量级,对于占用户总量90%多的老用户来说,只有前一两天是有效果的。如果改成每天都均匀地去增加10%,有可能会提升整体的覆盖速度。

刚好我们的产品即将发布新版本,可以借此机会验证下这个假设。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,294评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,493评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,790评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,595评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,718评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,906评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,053评论 3 410
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,797评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,250评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,570评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,711评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,388评论 4 332
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,018评论 3 316
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,796评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,023评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,461评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,595评论 2 350

推荐阅读更多精彩内容

  • Android 自定义View的各种姿势1 Activity的显示之ViewRootImpl详解 Activity...
    passiontim阅读 171,827评论 25 707
  • 发现 关注 消息 iOS 第三方库、插件、知名博客总结 作者大灰狼的小绵羊哥哥关注 2017.06.26 09:4...
    肇东周阅读 12,066评论 4 62
  • 社交红利阅读笔记 书名:社交红利(修订升级版) 作者:徐志斌 出版社:中信出版社 正文前笔记: 推荐序1摘要 社交...
    凫水阅读 8,920评论 4 26
  • 古字文言毫笔瘦,轻纸西窗漏。一念乱三秋,冰露残霜,不解凝眉皱。 长相思忆长相久,更恨寒鸦旧。落叶聚还离,星斗消魂,...
    野孤蝉阅读 237评论 0 10
  • 这本书中文译名为《世界上最神奇的24堂课》,或者《万能钥匙》,该书思想最早形成于作者1912年教授的课程,1916...
    Norman_Plus阅读 3,865评论 0 1