线上AB实验的日志分析

1，如果策略只影响部分商家/商品，则统计分析出受影响这部分的效果指标。

具体操作：在实验组圈选出 受策略影响的商家/商品，对这部分商家/商品，统计实验组VS对照组的效果指标。

分析出了 受影响这部分商家/商品的正向或负向，很重要，可以决定在大盘指标不显著时，是否延长观察时间，如果受策略影响这部分是正向的，且影响面不小，那么大盘大概率只是暂时不正向的。

2，如果策略影响全部商家/商品，可统计分析出哪些（类别的）商家/商品受策略影响之后 正向最大 或 负向最大，可以关闭负向部分的商家/商品的策略。