ads-test

ads-test

熱門

設計與評估付費廣告實驗,涵蓋假設建立、隨機化單位、樣本數與測試時長推估、護欄指標、平台實驗工具應用、數據分析及決策規則。適用於 A/B 測試、分流測試、實驗設計、假設檢定、統計顯著性、樣本數估算、測試時長評估或實驗結果判讀。

7735星標
1144分支
更新於 2026/7/13
SKILL.md
唯讀
名稱
ads-test
描述

設計與評估付費廣告實驗,涵蓋假設建立、隨機化單位、樣本數與測試時長推估、護欄指標、平台實驗工具應用、數據分析及決策規則。適用於 A/B 測試、分流測試、實驗設計、假設檢定、統計顯著性、樣本數估算、測試時長評估或實驗結果判讀。

付費媒體實驗

  1. 明確說明決策目標、因果假設、實驗組(Treatment)、對照組(Control)、隨機化單位、目標受眾(Population)、主要指標、護欄指標、最小可檢測效應與終止規則。
  2. 檢查平台限制、重疊實驗、轉換滯後性、季節性因素、相互干擾(Interference)及測量品質。
  3. 根據已聲明的假設計算所需樣本數與測試時長;若採用近似估算須明確說明。
  4. 除非實驗設計已明確納入交互作用估算,否則一次僅變更單一決策變因(Decision surface)。
  5. 預先登記排除條件、數據品質檢查、分析方法與決策門檻。
  6. 進行實驗結果判讀(Readout)時,在估算效應量與不確定性之前,須先驗證分組分派完整性與數據完整度。
  7. 以帶有版本控管的 JSON 格式回傳實驗設定或判讀結果,並附上通俗易懂的白話決策結論。

切勿在出現有利結果時頻繁偷看數據並提前終止實驗,切勿將統計檢定力不足的噪音誤判為勝者,亦不可將結論過度推廣至測試受眾之外的群體。