Duolingo多邻国的6个用户习惯养成机制A/B测试

注:本文为翻译文章。原文作者 Ben Davis @ Econsultancy,查看英文原文,请点击下方原文链接。

如果你用过Duolingo(官方中文翻译是多邻国)这款语言学习app,肯定会有这样的感觉:真像玩游戏啊。

没错,这并不是没有根据的。多邻国的确是非常倚重游戏化的力量。最近在 Canvas Conference上,多邻国的产品经理 Zan Gilani 详细地分享了他们在手机端用户习惯养成机制的一些 A/B 测试案例。

(注:A/B 测试是指事先制作两个或多个版本,让用户随机访问,最后选择数据表现最好的作为最终版本。)

在我们深入这个话题之前,先来补充一点点关于多邻国的背景知识:

可学习25种语言,中文课程即将上线。(注:目前中文课程已上线)

用户达两亿,可以说是世界上下载量最大的学习类app

其使命是在世界范围内提供免费的语言学习工具(app 本身完全免费)

该公司目前有几十亿数据点(每个月六十亿次单课被完成),而且还在持续迭代

激励学习者的四种方式

对于多邻国来说,最大的挑战是让学习者保有持续的动力。自学这件事本来就很难,再加上又是在线的,这就变得难上加难了。Gilani 说 MOOCs(大型开放式网络课程)的完课率非常低,大概也就1%到2%。

为了克服这个挑战,多邻国开始向游戏行业取经,然后Gilani 把以下四种方式应用到了『每日任务』的设计中:

小而具体的目标

可视化的进度

外在的触发机制(让用户回到 app)

用户投入设计 

熟悉多邻国的朋友都知道,小而具体的目标是贯穿整个 app 的,因为用户必须完成一个目标才能解锁下一个。Zilani举了一个健身的例子,“我要提升身体素质” 就是一个含糊不清的目标,但是“每天跑步一英里”就非常明确了。

满足四个标准的『连续打卡』机制

Zliani 和多邻国选择专注在 ’streak’(『连续打卡』)上。(注:’streak’的字面意思是做一件事的连续记录,比如三连胜、连续学习7天等,暂且翻译成『连续打卡』如有更好建议,请留言分享)

『连续打卡』是一种强大的游戏化机制,上面说的四个习惯养成机制的标准它都满足。不信,你看一下 Snapchat, Facebook 或者是 Headspace 就知道了。这些应用都会提醒并鼓励用户保持连续活跃记录。

所以在多邻国上,用户都会被鼓励设定自己的每日目标,做出每天使用 app 学习的承诺。如果你能连续多天做好,你的『连续打卡』记录就会不断变长。

有些用户真的非常在意他们的『连续打卡』能保持不断,甚至到了什么程度呢,Gilani 说了一个用户的故事:那位用户给多邻国总部发邮件,解释他们在 Irma 海啸期间网络中断了的情况,问能否网开一面帮他们恢复断了的连续打卡记录。

A/B 测试 #1 – 进度的可视化

用户需要看到他们的进度,但是以前在多邻国应用上,连续打卡记录并非一直可见。所以,多邻国团队做了一个测试,用户当前的连续打卡情况一直显示在app 的最上方,这样不管什么时候,用户都可看到自己当前进度。

结果是很惊人的:日活增加了3%(注:日活即app 上一天活跃用户的比率),14天留存率增加了1%(注:14天留存是指新用户14天后使用 app 的比率)这些提升从长远来看是有巨大的价值的。

A/B 测试 #2 – 强化『连续打卡』

下一步是在每课完成后强化每日打卡。每当完成一课后,用户会看到下图所示的火环。

结果是:日活增加了1%,14天留存增加了3%。

A/B 测试 #3 – 外部触发机制

像邮件或者应用内通知等外部触发机制,总让人感觉像垃圾信息,Zilani 说。但是『连续打卡』能让这种坏印象变好一点点。因为它为这些提醒通知提供了一个正当的理由。所以,多邻国可以说 “记得哦,你已经连续打卡24天啦。” 而不是简单一句 “快来用我们的 app 吧”。

在这个测试里,多邻国团队还做了一个实验:尝试在用户完成上一课后的不同时间点,来发送这些提醒通知。

结果表明,上次课后的23.5小时发送邮件,提醒再次学习的效果是最好的。这样的结果也并不让人意外,Zilani 指出,毕竟每天在同样的时间做一件事是最容易形成习惯的。

关于多邻国的外部提醒机制最好笑的部分是,在用户连续5天没有使用 app 后,它会使用“消极-攻击型通知”。通知文案的语气延续了多邻国一贯的自然、好玩儿的风格,一开头是这样写的:

“hi,我是多儿。看起来给你发的提醒通知也没什么用哈,那我以后就不发了。”

A/B 测试 #4 – 用户投入

在多邻国有一种虚拟的货币,叫多邻角(官方译名)。用户可以用它在 app 内购买不同的东西,比如不打卡特权(允许某天不打卡也不会中断记录)

还有一个被测试的机制是“连续打卡对赌”。用户用多邻角作为赌注,来赌自己能完成一定时间的连续打卡。因为app 里预先没有这样的机制,这个功能(比如连续7天打卡的赌局每周会出现一次)

(图上文案大意:赌5个多邻角,连续7天打卡,做到得10个多邻角)

结果:14日留存率增加了5%,应用内购买的收入增加了六倍。

这里要说明的是,多邻国本身永久免费,但现在用户可在应用内购买订阅服务,来使用离线功能(这个对连续打卡很关键)和去掉页面上的广告。

Gilani 提到,这个测试也尝试过连续两天打卡赌局,但由此带来的14日留存和日活的增长小到可以忽略不计。

A/B 测试 #5 – 薄弱时刻的特别设计

据 Gilani 说,每到周末多邻国上的用户就会减少9%。事实上,很多用户就是因为这个原因而没有坚持连续打卡。因为一旦中断一天,用户就会失去继续的动力。

所以,假如用户可以跳过一天不打卡而不会中断记录会怎样呢?这正是『周末护身符 (weekend amulet)』要做的,你可以用20个多邻角来换一个护身符。多邻角是多邻国里的一种虚拟货币。

(图上文案大意:周末护身符。假如你周末忘了打卡,能保你的连续打卡不会断。20个多邻角换一个。)

通过这个功能就能告诉用户 “你周末不学习也不要紧啦”。这个功能产生了很大的影响。

结果是:14日留存增加了4%,中断连续打卡的用户减少5%。

A/B 测试 #6 – 设计多种赢的方式

其实不只是『连续打卡』这个机制能激发用户投入。多邻国还引入了成就勋章体系。不过要用好可不容易。按照 Gilani 的说法是:因实现不到位而导致了一个糟糕游戏化设计,通常会把责任归结到成就体系的设计上。当然如果用得好,它还是有积极影响的。

跟『连续打卡』不同,勋章是永久的,而且完成不同的事情会有不同的勋章。比如说,邀请好友、早上8点前登录等等。而且不像『连续打卡』,勋章是可完成的。Gilani 用了一个表达来形容:你可以全部得到它们。

关于成就体系的第一个测试是:新用户首次使用多邻国时祝贺他。测试结果是,什么用都没有。日活、14天留存以及其他数据都是0%增长。

Gilani 说这是因为他们当时忘了这个测试必须得有意义才行,而注册这个行为并不足以称为一个“成就”。“用户必须看到他们取得了什么成就,只有付出了努力,才值得奖励。” 他补充说。

于是他们又测试了几种提高了门槛的勋章,确实还是有效果的。他们看到日活增加了2%,14天留存增加了2%,同时应用内的购买增加了5%。

而以上数据增长是建立在,给勋章增加了等级的基础上的。比方说,用户在一个测试中得满分就可获得一个勋章,不过想要再得勋章,就得五个测试得满分,然后是10个。勋章的等级机制进一步提升了数据表现:日活增加1%,14日留存也增加了1%。

(多邻国的勋章墙)

一个正能量的结尾

Gilani 最后告诉在场的听众们,产品设计者是可以通过产品,让更多的人走得更远、学得更多的。多邻国的一个成功案例是一位叫 Edilson的用户。他原来是哥伦比亚的一名保安。通过用多邻国 app 自学了多门语言,他最近找到了一份新工作:在保安学校教英文。

好了,最后我想知道,你会通过什么样的 A/B 测试让用户持续使用你们的产品或服务呢?

英文原文链接 https://www.econsultancy.com/blog/69549-six-a-b-tests-used-by-duolingo-to-tap-into-habit-forming-behaviour

(全文完) 

本文首发自公众号「一周一城」,如果对你有启发,别忘了点赞支持一下哇。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,294评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,493评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,790评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,595评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,718评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,906评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,053评论 3 410
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,797评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,250评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,570评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,711评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,388评论 4 332
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,018评论 3 316
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,796评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,023评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,461评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,595评论 2 350