AB测笔记(三)

AB测笔记(三)

• 如何判断一个样本通过计量符合什么分布
  • 判断样本是不是大样本
  • 能否通过正态分布
  • 能否增加样本量
  • 
• 统计分布(Z分布，T分布，卡方分布)
  • 
  • T分布与标准正态分布（Z分布）都是以0为对称的分布，T分布的方差大所以分布形态更扁平些
  • 卡方分布是大于0的右偏分布，随着自由度的增加会趋近于正态分布（注意不是标准正态分布）
  • 
• 多个总体问题
  • 
• 不同分布的拒绝域
  • 
  • 
  • 
• 企业的ABTest的关键流程
  • 整体实验设计与分析流程
    • 
  • 实验设计
    • 确定业务目标
      • 明确我们要提升的业务指标(如果明确，实验会显得比较精简。目标明确)
      • 明确我们要改进的产品/策略
    • 选择检验指标
      • 
    • 选择统计量
      • 
    • 确定原假设与备择假设
      • 
    • 两类统计错误的防范
      • 
    • 样本量计算
      • 统计学上根据统计量抽样分布和边际误差确定样本量
      • 样本量计算工具：http://powerandsamplesize.com/Calculators/Compare-2-Means/2-Sample-Equality https://www.evanmiller.org/ab-testing/sample-size.html
      • 业务层面是以一类错误临界值二类错误临界值计算
      • 
      • 
    • 检验策略选择、设计分组策略
      • 
    • 当企业没有AB测试的条件的时候，如何解决问题？
      • 
    •