数产实战进阶6-7

数产实战进阶6-7

第6章数据指标体系

数据指标需要对业务进行进一步抽象,通过埋点进行数据采集,设计一套计算规则,通过可视化呈现,能够解释用户行为变化与业务变化。常见的指标有PV、UV。

指标的主要类别:基础指标(订单数、DAU),复合指标(ARPU、人均章节阅读数)、派生指标(近三日销售额)

数据指标的类别:埋点数据、业务数据、财务数据、复合数据

  • 埋点数据

    • 基本的埋点指标(以APP端举例)有:启动用户数(日活DAU)、新增用户数、启动次数、某页面访问量(PV)、平均使用时长(排除小于0和大于24小时1440分钟的脏数据)、平均日启动次数、次日启动留存、次日新增留存、标的物被浏览次数、签到人数、某元素点击人数
    • 比较常用的派生指标:累计用户数、7日平均新增用户数、7日平均次日留存率、7日平均日使用时长、7日平均活跃用户、周活(WAU),月活(MAU)
  • 业务数据

    • 常见的业务数据指标:充值用户、充值额度、消费总用户、充值次数、首冲忍人数、消费金额
    • 会员人数、新开通人数、老会员续费人数、累计会员收益
  • 复合数据

    • CPA每个用户的注册成本,GMV成交总额,ARPU用户平均回报,ARPPU付费用户平均回报,CTR广告点击率、CPM广告展示千次的成本,ROI投资回报率

数据指标的构建,感觉AARRR模型就很合适

第7章AB测试系统搭建

AB测试的特点

  • 先验性:属于预测型结论,与后验的归纳行结论差距很大。先验的可以直接对业务产品进行干预和影响。
  • 科学性:通过严格的随机算法将相似的用户均分到试验组中,确保每个组的用户特征的相似性,避免数据偏差
  • 严谨性:AB测试的结果需要统计学的假设检验进行验证,有着深厚概率统计学的支持
  • 成效性:较低成本的小范围测试,试错成本低
  • 并行性:AB可以将两个或两个以上的方案同时验证,保证了各个版本环境的一致性,更加科学的比较

AB的测试场景,主要有四个,界面测试、功能测试、算法测试、人群测试

  • 界面测试:用来优化UI,比如按钮的颜色设置,字体设置、文案设置等等
  • 功能试验:新功能上线或下线,功能变动试验。例如APP签到下线后的用户反应和影响
  • 人群试验:属于进阶版的AB测试,有两类:一类是特定人群分流测试不同方案,例如测试90后女性对不同风格首页的反应。二类是测试不同人群对于同一方案,本质是看不同人群对该方案的认可程度,例如研究不同年龄段人群的复购程度
  • 算法实验:新的推荐算法的效果

AB测试流程:主要分为需求洞察、需求发起、方案设计、需求落实、效果分析五个阶段

  • 需求洞察:例如某个设计有点丑,某个位置应该让出来、应该选择哪个落地页

  • 后面流程并不绝对,这里不展开说了

  • 方案设计

    • AB的成功需要两个角色的配合,分别是AB测试系统侧来解决分流问题,AB测试产品侧解决产品问题

      • 分流方案:明确具体的分流算法,明确实验分层与分组,每组的流量与占比方式,明确分流实验周期,明确分流的人群与预测分流的风险
      • 产品方案:产品原型的设计,效果指标的定义与埋点方案设计
  • 需求落实

  • 效果分析

    • 一般周期不强的,收集两周就可以做完整分析了,然后结合正态分布、中心极限定理、t检验等统计学理论判断结果是否显著

      • 一般而言,是选择目标指标95%置信度下的置信区间ab作为参考

AB测试系统设计

AB测试案例分析

AB测试经验建议

©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容