ab-test-setup
設計可靠的 A/B 測試
當假設、指標和樣本大小不明確時，團隊可能得到無定論的實驗結果。此技能會結構化 A/B 測試，讓決策能使用可靠證據。
Install with my Agent
Copy this request to your Agent. It includes the canonical Skill page and manifest.
Review the Skillstore skill "ab-test-setup" from https://skillstore.io/skills/coreyhaines31-ab-test-setup.md and its manifest at https://skillstore.io/api/skills/coreyhaines31-ab-test-setup/manifest. Verify the artifact. You may proceed after verification, subject to the environment's own policy.Your Agent should still show its plan and request any confirmation required by the security policy.
Agent-readable resources
Use these links when an AI agent, crawler, or script needs clean context instead of reading the full page.
Test it
Using "ab-test-setup". 為定價頁標題規劃 A/B 測試，每日訪客 8,000 人，方案選擇率為 4%。
Expected outcome:
- 假設將標題變更連結到更清楚的價值感知和更高的方案選擇率。
- 建議設計為 50/50 A/B 測試，只變更一個標題，並維持定價內容穩定。
- 指標包含方案選擇作為主要指標、頁面停留時間作為次要指標，以及退款率作為防護指標。
- 持續時間取決於最小可偵測效果，且應涵蓋至少一個業務週期。
Using "ab-test-setup". 審查已完成的註冊流程測試，註冊提升 6%，但註冊後啟用表現較弱。
Expected outcome:
- 結果在推出前需要同時具備統計顯著性和實際顯著性。
- 較低的啟用率是防護指標疑慮，可能抵消註冊提升的價值。
- 建議行動是在全面上線前進行客群審查、品質分析和後續測試。
Using "ab-test-setup". 為登陸頁 CTA 實驗建立文件。
Expected outcome:
- 文件包含測試名稱、日期、負責人、假設、變體、指標、決策、行動和學習成果。
- 變體備註描述 CTA 文案和位置變更，而不改動無關的頁面元素。
- 學習知識庫備註記錄為何執行此測試，以及接下來應測試什麼。
Security Audit
SafeThe flagged external command findings are Markdown code fences used for templates, formulas, and output examples. The hardcoded URLs are public A/B testing calculator references, and the reconnaissance findings are ordinary experimentation guidance.
Risk Factors
⚙️ External commands (9)
🌐 Network access (2)
Share & cite this report
Share the versioned assessment report, neutral badge, embed card, and citations. Skillstore reports evidence without deciding whether this Skill is safe.
Copy report link
https://skillstore.io/skills/coreyhaines31-ab-test-setup/audits/4?utm_source=security_passport&utm_medium=share&utm_campaign=versioned_reportMarkdown badge
[](https://skillstore.io/skills/coreyhaines31-ab-test-setup?utm_source=security_passport_badge)HTML badge
<a href="https://skillstore.io/skills/coreyhaines31-ab-test-setup?utm_source=security_passport_badge"><img src="https://skillstore.io/badges/skills/coreyhaines31-ab-test-setup/security.svg" alt="Skillstore security assessment" loading="lazy"></a>Embed card
<iframe src="https://skillstore.io/embed/skills/coreyhaines31-ab-test-setup.html" title="Skillstore Security Assessment" sandbox="allow-popups allow-popups-to-escape-sandbox" loading="lazy" referrerpolicy="no-referrer" width="420" height="180"></iframe>Academic citations (APA · BibTeX · CFF)
APA citation
coreyhaines31. (2026). ab-test-setup security audit report (audit version 4) [Author version unspecified]. Skillstore. https://skillstore.io/skills/coreyhaines31-ab-test-setup/audits/4BibTeX citation
@techreport{coreyhaines31-coreyhaines31-ab-test-setup-2026,
author = {coreyhaines31},
title = {ab-test-setup security audit report (audit version 4)},
institution = {Skillstore},
year = {2026},
number = {4},
url = {https://skillstore.io/skills/coreyhaines31-ab-test-setup/audits/4},
note = {Author version unspecified}
}CITATION.cff
cff-version: 1.2.0
message: "If you use this Skill, cite its author and this versioned security audit report."
title: "ab-test-setup security audit report (audit version 4)"
version: "unspecified"
type: report
authors:
- name: "coreyhaines31"
date-released: "2026-07-06"
url: "https://skillstore.io/skills/coreyhaines31-ab-test-setup/audits/4"
identifiers:
- type: other
value: "skillstore:coreyhaines31-ab-test-setup:audit:4"
description: "Skillstore immutable audit report identifier"
Compare variants
2 installable variantsEach author remains a separate installable skill. The recommended variant is ranked by Skillstore evidence.
Why this variant is first
sickn33-ab-test-setup
2026-09-09
coreyhaines31-ab-test-setup
2026-09-09
Skillstore Score
Why this score Evidence Confidence: HighWhat You Can Build
規劃登陸頁測試
為標題、CTA、版面配置或社會證明變更建立清楚的測試計畫。
排定產品實驗優先順序
將產品想法轉化為具有變體、指標和決策規則的可衡量實驗。
審查實驗結果
在測試結束後評估顯著性、實際影響、防護指標和後續行動。
Try These Prompts
協助我為 [page or flow] 規劃 A/B 測試。目前轉換率是 [rate]，每日流量是 [number]，提議的變更是 [change]。
審查這個測試想法：[idea]。將它轉化為清楚的假設，並定義主要、次要和防護指標。
為包含 [baseline rate]、[MDE]、[daily traffic]、[variants]、95% 信心水準和 80% 檢定力的測試設計樣本大小方法。
為 [business goal] 建立完整的實驗簡報。包含假設、變體、分配、QA、分析計畫、風險、決策規則和學習知識庫備註。
Best Practices
- 在上線前預先定義假設、樣本大小、持續時間和決策標準。
- 使用一個主要指標，以及與營收、留存或使用者品質相關的防護指標。
- 在測試期間保持變體穩定，並記錄外部因素。
Avoid
- 因為目前結果看起來顯著就提早停止測試。
- 在沒有足夠流量進行可靠歸因的情況下，測試多個無關變更。
- 從上線前未規劃的區隔資料中判定勝出者。
Frequently Asked Questions
此技能可以選擇正確的 A/B 測試類型嗎？
它會計算精確的樣本大小嗎？
它可以實作追蹤程式碼嗎？
我應該先提供哪些資訊？
測試完成後它還能協助嗎？
它可以搭配 Claude、Codex 和 Claude Code 使用嗎？
Developer Details
Author
coreyhaines31License
MIT
Skillstore revision
r1
Version notice
The author did not declare a version.
Ref
d11af420e07cd866fe39cfa937efef3223896c06
Maintenance freshness
7/18/2026
Usage
4 downloads · 139 views
File structure
📄 SKILL.md