产品计划推出邀请奖励,希望老用户带来新用户。你会如何设计实验,避免获得大量只薅额度的低质量流量?
考察说明
考查带质量护栏的增长实验设计。
回答思路
- 先定义希望扩大的是能完成核心任务并复用的目标用户,而不是邀请链接点击、注册或模型调用次数。
- 奖励在被邀请者完成有效任务并经过一定观察期后发放,避免仅凭注册即时到账形成批量作弊动机。
- 按邀请者使用质量和目标场景选择实验人群,设置对照组,避免其他活动同时变化导致归因失真。
- 配置账号、设备、支付和调用异常检测,对高频自动化注册、相互邀请和高成本空转设置人工复核。
- 同时监控有效激活、周期留存、获客成本、推理成本、举报和安全事件,不能只展示新增用户曲线。
- 实验结束后比较增量留存价值是否覆盖奖励与服务成本,低质量渠道应停止或调整门槛而非继续放大。