1. 空跑期 空跑期时,实验组和对照组使用相同策略进行实验,用于观测检测两组之间的流量是否有差异。

  2. 回溯期/AA回溯 AA回溯是是backward trace的重跑,拿实验前的数据比较,是对空跑期的模拟。

3.(多天)累计数据 多天间用户累计去重,实验指标数据累加的计算方式

  1. 非累计数据 用户按天去重,实验指标天内累加、多天间独立的计算方式

  2. 维度 为下钻分析提供分类依据,维度的类型可涉及:渠道、用户类型等等,主要依据实验人员自身需求决定。

  3. 数据源表 当前数据源表分为以下4类:用户属性表、实验命中表、用户指标中间表、异常用户表(且我们建议实验命中信息,单独形成实验命中表,以提升计算效率)。

  4. 用户属性表 记录用户不同维度的属性,用于不同维度的下钻分析。

  5. 实验曝光表 记录用户命中实验的数据,用于与用户指标中间表进行匹配计算。

  6. 用户指标中间表 记录用户行为,此表对数据进行用户粒度的聚合,每一条数据都是一个用户的行为聚合数据。

  7. 异常用户表 记录异常用户数据,用于实验结果计算时排除异常用户数据。