AB 测试的原理及要点

1 AB测试统计原理

- 统计抽样分布 t分布及检验，中心极限定理
	 概率类 是用 Z检验 -正态分布，均值类 是 t检验
- P值，置信区间，标准差 - 波动率计算
- 

2 AB测试流程及注意事项

- 确定目标及假设
- 确定评价指标
	大的分阶段看业务目标/KPI； 或者借鉴其他公司经验
- 确定实验单位
- 确实样本量
- 随机分组实验
- 合理性检验
- 结果分析：
	1）数值分析，及合理性分析
	2）统计显著，结果不显著
	3）统计不显著，实验能上限？

2 适用范围/场景

- 产品迭代 ：页面设计/交互/流程/功能/
- 算法优化
- 市场营销：优惠活动 / 内容文案 / 营销时间 / 推送

3 AB测试的样本数计算

  AB 测试什么时候停？ 收集到一定样本量的情况下
- 在确定样本量时，会考虑时间因素/收入因素，最小化成本，最小化时间
- 对于客户察觉性比较强的，持续性质的，比如版面设计，
- 对于trigger触发性质的，短期展示，客户个察觉度较低的，可以走全量

4 AB测试的注意事项要点

• 样本选择随机化

5 常见面试问题 （知乎 + 极客）