一. 概述及使用场景
当实验开启多组,有一组因工程或策略等问题导致有不可接受的负向,需要及时止损但又希望其他组继续实验不受影响,支持关闭某实验组。
例如实验开启A、B、C、D四组,发现B组显著负向,想要关闭B组但继续尝试C、D组。
二. 关闭后分流说明
- 用户将不会再命中该实验组,且该实验组今天后无数据。
- 流量不会释放,既不会进入该实验的其他组也不会被同层的其他实验使用。比如某实验开启了4组,共使用了20%的流量;此时实验层上可用流量为80%。关闭B组后,A、C、D组仍然为各5%的流量。且实验层上可用流量仍为80%(而非85%)
- 实验组关闭后,不可重新开启。
- 若关闭实验组后实验继续扩量,则会均匀扩量至A、B、C、D四组,但B组流量并不生效。仍以此例子为例,假设关闭B组后,将实验流量扩大至40%;此时此时实验层上可用流量为60%,A、C、D组变为各10%的流量,已关闭的B组仍会占用10%的流量,但流量并不会命中该组,配置也不会生效。
- 当实验中的所有实验组全部关闭后,此实验将被结束
三. 功能入口
实验报告页面,如下图: