SKILL.md
唯讀
名稱
ads-test
描述
設計與評估付費廣告實驗,涵蓋假設建立、隨機化單位、樣本數與測試時長推估、護欄指標、平台實驗工具應用、數據分析及決策規則。適用於 A/B 測試、分流測試、實驗設計、假設檢定、統計顯著性、樣本數估算、測試時長評估或實驗結果判讀。
付費媒體實驗
- 明確說明決策目標、因果假設、實驗組(Treatment)、對照組(Control)、隨機化單位、目標受眾(Population)、主要指標、護欄指標、最小可檢測效應與終止規則。
- 檢查平台限制、重疊實驗、轉換滯後性、季節性因素、相互干擾(Interference)及測量品質。
- 根據已聲明的假設計算所需樣本數與測試時長;若採用近似估算須明確說明。
- 除非實驗設計已明確納入交互作用估算,否則一次僅變更單一決策變因(Decision surface)。
- 預先登記排除條件、數據品質檢查、分析方法與決策門檻。
- 進行實驗結果判讀(Readout)時,在估算效應量與不確定性之前,須先驗證分組分派完整性與數據完整度。
- 以帶有版本控管的 JSON 格式回傳實驗設定或判讀結果,並附上通俗易懂的白話決策結論。
切勿在出現有利結果時頻繁偷看數據並提前終止實驗,切勿將統計檢定力不足的噪音誤判為勝者,亦不可將結論過度推廣至測試受眾之外的群體。






