产品

无意中刷公司内网，看到了一个半佛老师用产品思维做内容的分享视频，应该是其他部门同学邀请半佛老师过来做了一次分享。本打算当相声听，结果远超预期，虽然是几年前的分享了，但放到今天依然有可学习的意义。不得不说，半佛真能说啊，对着一个思维导图，两个...

什么是反转实验？ 反转实验也称作长期反转实验。在A/B实验中，我们会从总体流量中抽取一部分流量，设置实验组（新策略组）与对照组（原策略组），来衡量某个新策略的效果。当实验组的指标胜出后（通常意味着指标正向显著），我们会上线这一新策略（面向全体...

背景信息 二战期间，美国统计学家亚伯拉罕.沃德接受美国海军的邀请，运用统计知识给出战机应该如何加强防护才能降低被炮火击落概率的建议。沃德教授根据盟军轰炸机遭受攻击后的数据，分析研究后发现：分布在机翼的弹孔最多，分布在发动机的弹孔最少，因此美国...

假设检验 （1）为什么要做假设检验？ A/B Test从本质上来说是一个基于统计的假设检验过程：它首先对实验组和对照组的关系提出了某种假设，然后计算这两组数据的差异和确定该差异是否存在统计上的显著性，最后根据上述结果对假设做出判断。 但事实上，我们关心...

空跑期 空跑期时，实验组和对照组使用相同策略进行实验，用于观测检测两组之间的流量是否有差异。 回溯期/AA回溯 AA回溯是是backward trace的重跑，拿实验前的数据比较，是对空跑期的模拟。 3.（多天）累计数据 多天间用户累计去重，实验指标数...

实验组/实验版本 一个实验可以有两个或两个以上的实验版本，针对每个版本下发不同的策略，并观察他们的效果。 实验参数 实验参数，指的是对实验业务策略、功能的配置化映射，即不同的实验参数对应的不同的业务策略、功能。 分流方式 按比例下发：按照流量比例随机...