AB Test

• A/B Testing
• Split Testing
• AB Test 框架
• 步骤
  • 实验目标
    • 指标
      • 用户转化率
      • 用户留存率
      • 交互率
        • 点击率
        • 页面浏览量
        • 退出率
        • 点击深度
      • 平均访问时长
      • 满意度评分
      • 收入
      • 成本效益
  • 设计测试
    • 测试变量
      • 多变量测试中减少变量
    • 样本大小
      • 样子量要大，有随机性
    • 时间
      • 足够长
    • 分组方法
  • 实施测试
    • 控制组、实验组
  • 分析结果
    • 假设检验、置信区间
  • 应用结果
    • 版本上线
• 运维方法
  • 线上对照环境
    • 切流方法
  • 数据收集分析
    • 页面跟踪代码
  • 测试报告