ads-test

ads-test

热门

设计并评估付费广告实验,涵盖假设拟定、随机化单位、样本量与时长预估、护栏指标、平台实验工具运用、结果分析及决策规则。适用于 A/B 测试、拆分测试、实验设计、假设检验、统计显著性评估、样本量与测试周期测算或实验复盘报告等场景。

7735Star
1144Fork
更新于 2026/7/13
SKILL.md
只读
名称
ads-test
描述

设计并评估付费广告实验,涵盖假设拟定、随机化单位、样本量与时长预估、护栏指标、平台实验工具运用、结果分析及决策规则。适用于 A/B 测试、拆分测试、实验设计、假设检验、统计显著性评估、样本量与测试周期测算或实验复盘报告等场景。

付费投放实验

  1. 明确待决事项、因果假设、实验组(Treatment)、对照组(Control)、随机化单位、目标人群、核心指标、护栏指标、最小可检测效应(MDE)以及终止规则。
  2. 排查平台限制、重叠实验、转化延迟、季节性波动、组间相互干扰以及归因测量质量。
  3. 根据设定假设测算所需样本量与测试周期;若存在近似估算需明确说明。
  4. 每次仅变更单一决策维度,除非实验设计中明确包含交互效应评估。
  5. 预先确定数据剔除规则、质量检查流程、分析方法及决策门槛。
  6. 进行实验复盘(Readout)时,在评估效应值与不确定性之前,须先校验分流正确性与数据完备度。
  7. 将实验方案或复盘结果以带版本号的 JSON 格式输出,并附带通俗易懂的决策结论。

切忌频繁查看数据并在出现有利结果时提前终止,切勿把统计功效不足的噪声误判为胜出方案,也不可将实验结论过度外推至未经测试的人群。