A/B 测试在互联网公司高频使用,它是为了达成某个目标设计2个及以上的方案,让不同的用户使用体验不同方案,通过观察不同方案的数据表现,从中得出最优方案的实验方法。
A/B Test的本质是以样本估计整体,是双样本的假设检验。
我把 A/B 测试相关的知识点和难点都统一做了梳理,整理在一张思维导图里了。通过这张图就可以快速地学习A/B 测试的知识点了。
一图胜千言。主要内容包含:
(1)A/B Test到底是什么?本质是什么?
(2)A/B Test的使用场景,即在哪些业务场景中可以使用A/B Test?
(3)为什么要使用A/B Test?
(4)A/B Test有哪些类型?
(5)A/B Test的实验流程是什么?即如何开展A/B Test?这包含了提出假设、设计流量分配规则、确定样本量、确定实验时长、明确观察指标及埋点方案、分析结果判断显著性等。
(6)A/B Test的关键点是什么?
(7)导致A/B Test不理想的因素有哪些?
(8)A/B Test的限制场景,即哪些场景不能使用A/B Test?

