涉及的内容:
AB实验的前置知识
AB实验的架构
AB实验的创建
AB实验的分析
AB实验的展示
AB实验的监控
AB扩展---指标监控
AB扩展---指标异动
AB扩展---异动分析
AB实验参考书籍
1.什么是AB
AB 测试(也称为拆分测试)是一种统计方法,用于比较两个(或更多)版本的网页或应用程序,以确定哪一个的性能更好。它广泛用于各种领域,特别是在网站优化和广告活动优化中
更加详细的内容:火山引擎AB实验
2.AB的思想
控制变量(准确的说:单一变量可量化)
3.AB实验的前置知识
3.1涉及AB实验统计概率知识:
假设检验,正态分布,单双边实验,无偏估计等
3.2涉及AB实验词汇:
流量,流量分配,互斥,正交,域,层,假设检验等
参考:熟悉基本名词概念--A/B测试-火山引擎
4.AB实验的架构
4.1实验创建
4.2实验原理及其方案
4.3实验的分析-提高
5.AB实验的创建
5.1实验的配置-要素
业务线,分流主键(非缺少),流量比例(非缺少),分流算法(非缺少),白名单(非必要)
业务线(非必要):做业务区分统计
分流主键:对什么群体分流,对b端,对c端,对u端,对g端
流量比例:实验组需要全体流量(目标层)的多少
分流算法:如何分流可以满足流量比例,且保证随机,譬如:hash,md5等
白名单:测试锁定分组,方便测试
5.2实验上线
配置完成以后,上线配置信息
6.AB实验的分析
7.AB实验的展示
8.AB实验的监控
9.AB扩展---指标监控
10.AB扩展---指标异动
11.AB扩展---异动分析
12.AB实验参考书籍
13.AB扩展论坛