为什么需要同期群分析?
大部分产品的用户使用行为是随使用时间的推移呈阶段性变化的,即用户对于产品/功能的使用是有生命周期的:用户在接触新产品or新功能后,会经历从初期使用,到频繁使用成为忠诚用户,或兴趣降低成为流失用户的过程。
产品运营需要做的,就是管理和改变用户生命周期,提升用户的黏性和活跃度。这里的数据决策基础,即同期群分析。
什么是同期群分析?
同期群分析 :即将用户按初始行为的发生时间进行划分为群组(即 同期群) ,然后:
1.实验策略对用户有长期效应吗?
抖音开发了一个播放时长换奖励的新功能,先开启一个A/B实验验证实验效果,看数据发现看到新功能的用户数据表现明显好于对照组,想知道实验策略能否对用户有长期影响:比如让用户养成了习惯,即使实验关闭无奖励,用户也依然保持着播放的习惯。
那么就可以借助同期群分析,观察用户自首次进入实验组看到新功能,在后续的1天后/2天后/n天后,指标表现是否还是优于对照组,从而判断实验策略是短期有效还是长期对用户有影响。
2.分析实验对不同活跃度用户的影响
实验开启后,想比较在实验不同阶段体验实验策略的用户,后续的表现情况,用于分析不同日期「新进组用户」群组之间的差异,则可借助同期群分析,对不同天「新进组用户」,查看1天后/2天后/n天后的指标表现
在实验报告页的高级分析页面,在左侧导航栏单击同期群分析,如下图:
指标趋势展示,所选时间内的首次进组用户自首次进组后当天、1天后、2天后...30天后的指标趋势图。
详细数据,展示所选时间内的首次进组用户自首次进组后当天、1天后、2天后...30天后的指标数据。
以指标purchase转化率为例,下图展示了新进组用户自首次进入实验后的购买转化率(即有购买的人数占比)趋势和详细数据,可以看到:
(1)用户从首次进组后,购买转化率(有购买的人数占比)是呈下跌趋势的,比如实验版本新进组用户是433人,首次进组当天购买转化率在10%左右,进组3天后的购买转化率在6%左右,在20天后趋于0
(2)从详细数据来看,实验版本与对照版本的按进组拆分购买转化率的对比是不显著的,也就是实验策略对于购买转化率长期趋势无正向效果。