几个AB测试案例

微营销新电商商品购买量、购买状态展示试验

公司简介

10086是中国移动官方出品的移动端APP。作为中国移动于2014年10月设立的全资专业子公司产品,10086基于中国移动服务8亿客户的模式,致力于在数字化服务加速启动的今天,满足客户对互联网的依赖和对“以指代步”的期待。10086面向个人客户,以“给手机一把金钥匙,开启4G专属服务”为宗旨,产品视觉简单直观,交互易用,提供流量查询、超额监控、套餐余量提醒等多种服务支持,同时还可以帮助亲友管理流量和话费,随时随地关注消费变化,保证所有用户的通信无忧。


案例背景

微营销新电商平台是中移在线服务有限公司设计开发以用户的高参与、高互动的新体验为基础的新型电商平台。通过将中国移动4G业务办理电商化并融合多种营销模式,为用户提供新型购买体验,持续提升业务的销售转化。通过轻量级的部署和场景化的流量在公司内外部的各个渠道,打造了微信/APP/短信/热线查询办理、视频直播电商、小程序社交电商、智能语音导购等多个销售场景,助力4G业务的销售与发展 。

考虑商品的风格样式对用户浏览是否有显著影响设计本次试验。


测试方案

原始版本:线条式商品图片

试验版本1:手绘风格商品图片

试验版本2:有一定立体效果的矢量图风格商品图片

试验版本3:有一定立体效果的矢量图风格商品的较大图片

核心关注指标:商品点击率。



A/B测试数据反馈

与商品信息贴切度高、风格简单清爽的ICON图片设计更能吸引用户点击,商品点击率提升25.32%。



泰康在线-住院保PC端页面优化

公司简介

2000年,泰康在线网站上线,是国内第一家由寿险公司投资建设、实现在线投保的网站,也是国内首家通过保险类CA认证的网站。泰康在线利用当时最先进的网络技术,在国内率先实现了保单设计、投保、核保、缴费、后续服务的全过程网络化,是国内首家真正意义上的“在线保险”。作为泰康人寿的官方网站,泰康在线始终是泰康人寿互联网业务的主要平台。2015年11月,作为行业内首家由国内大型保险企业发起成立的互联网保险公司,泰康人寿的全资子公司——泰康在线财产保险股份有限公司正式挂牌成立。泰康在线致力于互联网保险业务的创新与开拓,整合线上、线下保险服务,提供普惠保险产品,打造“活力养老、高端医疗、卓越理财、终极关怀”四位一体的互联网生态圈。目前,泰康在线已形成互联网产寿险结合的保险产品体系,产品线涵盖互联网财产险、旅行险、健康险、意外险、年金和投资连结险等。


案例背景

作为泰康人寿互联网业务的主要平台,泰康在线的核心业务需求就是让更多的线上流量转化为实际的投保用户。通过此前对A/B测试的了解,产品部门非常赞赏这种科学快速的优化增长方式,并且希望通过合理应用,推动互联网端业务指标的快速大幅增长。这一次,他们把目标指向了目前正在推广的住院保险业务,希望通过改变该产品在PC端的页面展现方式来优化投保转化率。


测试方案

AppAdhoc A/B Testing采用科学的试验流量分割,使得每一组试验对象具备一致的用户特征,并在试验过程中也可以随时调整用户流量,使企业可以在新版本上线之前,以最低成本观察客户对多个优化方案的数据反馈。同时,根据试验的数据发现用户反馈效果最好的版本,作为最终的新版本迭代方案。

针对住院保产品的核心竞争力,产品部门设计试验方案如下:


新版本的设计思路:

-优化产品报价版块:新版本更加直观的展现了不同款的对比情况,同时取消了“快速投保”和“会员投保”容易引起用户疑惑的情形,改为“立即投保”,更加直观;

-调整产品介绍版块:产品特色介绍新版变为更加专业化、条理化的叙述,同时运用层次化描述,视觉逻辑更加清晰;

-添加侧边栏:方便用户找到“理赔示例”,“理赔指南”等版块。

同时,将不同广告位的图片点击量和最终转化数量设置为此次试验的优化指标。


测试目标

本次试验的主要目标是,通过改变住院保PC端页面展现方式,验证是否可以促进“立即投保”转化率的有效提升,进一步明确今后的优化方向。


A/B测试数据反馈

此次试验在泰康在线的PC端进行,累计运行了2周的时间(一般来说,为了获得更加可信的数据结果,试验运行周期应至少保证1-2个完整的自然周)。在对试验数据进一步分析后,产品部门验证了此前的想法:

-试验版本胜出,其中业务部门最关注的核心优化指标“立即投保”的转化率提升了2倍之多;

-试验数据验证了团队设计新版本的想法,因此他们将全量上线优化后的版本。同时,也为之后的试验优化明确了方向。


泰康在线APP-底部tab优化

公司简介

2015年11月18日,作为行业内首家由国内大型保险企业发起成立的互联网保险公司,泰康人寿的全资子公司——泰康在线财产保险股份有限公司正式在武汉挂牌成立,注册资本金人民币10亿元。此前,作为泰康人寿的官方网站,泰康在线始终是泰康人寿互联网业务的主要平台。

2000年,泰康在线网站(www.taikang.com )上线,是国内第一家由寿险公司投资建设、实现在线投保的网站,也是国内首家通过保险类CA认证的网站。泰康在线利用当时最先进的网络技术,在国内率先实现了保单设计、投保、核保、缴费、后续服务的全过程网络化,是国内首家真正意义上的“在线保险”。

15年来,泰康在线致力于互联网保险业务的创新与开拓,整合线上、线下保险服务,提供普惠保险产品,打造“活力养老、高端医疗、卓越理财、终极关怀”四位一体的互联网生态圈。传统寿险基因的积淀,以及后天补充到位的互联网基因,共同成就了泰康在线在互联网保险领域得天独厚的优势。

为了给用户提供更全面的风险解决方案,泰康在线除了不断完善已有的养老、健康、意外、定寿等多种保险产品,还将加速研发一系列贴合互联网生态的财险产品,全力打造“产寿结合”的产业链。目前,泰康在线已形成互联网产寿险结合的保险产品体系,产品线涵盖互联网财产险、旅行险、健康险、意外险、年金和投资连结险等。

未来,成为独立子公司的泰康在线财产保险股份有限公司将秉承泰康人寿“专业化、规范化、国际化”的企业理念,依托泰康人寿的强大资源优势,发挥自身成熟的互联网保险运营优势,继续充当互联网保险“排头兵”的角色,全力打造“互联网保险”第一品牌。


案例背景

在经过PC站和M站的优化后,泰康在线团队根据业务重点,将PC段和M站端的试验经验转移到移动端,准备新增APP试验,进而提高移动端流量的转化率。


测试方案

原始版本如下图:

试验版本如下图:

优化指标:车险页面pv 和转化人数,其他保险产品的pv 和转化人数。


测试目标

将车险板块独立出来,既能快速满足特定群体的购买需求,也不会降低其余产品的购买转化。


A/B测试数据反馈

本次试验在分别在iOS 和android 客户端进行,每个版本各20%的流量,试验数据如下:

进过2周的试验,流量分别从2%,5%,到每个版本20%,车险相关板块的详细页点击pv 和人数转化提高了600%(统计功效接近1,功效足够),而其他保险产品的详情页转化略微降低了10%左右(但是功效不足够),根据分析,车险的版本吸引了本来可能由于位置不明显而带来的流量误触,略微降低了其他产品的点击率。但这完全在产品和运营部门的预期范围内而且iOS 和android 两端表现几乎一致。所以决定发布新版的底部tab 方案到全部流量。


更多AB案例:http://www.appadhoc.com/blog/4gguanjia-yewugengming/

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 215,634评论 6 497
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,951评论 3 391
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 161,427评论 0 351
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,770评论 1 290
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,835评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,799评论 1 294
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,768评论 3 416
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,544评论 0 271
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,979评论 1 308
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,271评论 2 331
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,427评论 1 345
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,121评论 5 340
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,756评论 3 324
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,375评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,579评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,410评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,315评论 2 352

推荐阅读更多精彩内容

  • 最近看了一本书《转型之战-传统企业的互联网机会》,作者是著名财经作家吴晓波,为人熟知的作品是《腾讯传》《激荡三十年...
    岳说越开心阅读 577评论 0 6
  • 前言:平安寿险、中国人寿、华夏人寿和安邦人寿一直是中国寿险业的四大标杆,2017年平安寿险及健康险实现营收5213...
    李小见不再见阅读 11,977评论 3 12
  • 1、去年第四季8险企罚单超3张 中小险企设分支或受限。新年伊始,人身险监管风暴不断来袭。其中,“上一年度受到保监会...
    燕梳研习社阅读 272评论 0 0
  • 16宿命:用概率思维提高你的胜算 以前的我是风险厌恶者,不喜欢去冒险,但是人生放弃了冒险,也就放弃了无数的可能。 ...
    yichen大刀阅读 6,044评论 0 4
  • 公元:2019年11月28日19时42分农历:二零一九年 十一月 初三日 戌时干支:己亥乙亥己巳甲戌当月节气:立冬...
    石放阅读 6,877评论 0 2