##心得

#1、实验推全时，直接新建一个推全层，所有需要上线的召回排序实验均放在该层，不再流量正交。
# 而不是每一层某个组扩大流量到100%，这样的话，有些实验桶无法及时释放。
# 累计较多试验后可能导致无桶可用，目前的我们的ab实验不多，存在这个潜在问题。

#2、实验反转与上同理。

#3、holdout机制没有完全用起来，只用到单实验与对照组ab，没有ab某个考核周期推荐的整体效果。
# 这与考核机制有关系。