SKILL.md
只读
名称
ads-test
描述
设计并评估付费广告实验,涵盖假设拟定、随机化单位、样本量与时长预估、护栏指标、平台实验工具运用、结果分析及决策规则。适用于 A/B 测试、拆分测试、实验设计、假设检验、统计显著性评估、样本量与测试周期测算或实验复盘报告等场景。
付费投放实验
- 明确待决事项、因果假设、实验组(Treatment)、对照组(Control)、随机化单位、目标人群、核心指标、护栏指标、最小可检测效应(MDE)以及终止规则。
- 排查平台限制、重叠实验、转化延迟、季节性波动、组间相互干扰以及归因测量质量。
- 根据设定假设测算所需样本量与测试周期;若存在近似估算需明确说明。
- 每次仅变更单一决策维度,除非实验设计中明确包含交互效应评估。
- 预先确定数据剔除规则、质量检查流程、分析方法及决策门槛。
- 进行实验复盘(Readout)时,在评估效应值与不确定性之前,须先校验分流正确性与数据完备度。
- 将实验方案或复盘结果以带版本号的 JSON 格式输出,并附带通俗易懂的决策结论。
切忌频繁查看数据并在出现有利结果时提前终止,切勿把统计功效不足的噪声误判为胜出方案,也不可将实验结论过度外推至未经测试的人群。






