A/Bテストとは？
A/Bテスト（A/B Testing） は、2つのバリエーション（パターンA・パターンB）を同時配信し、CVRやCTRなどの指標を比較する実験手法。データに基づく意思決定の基本。
テスト対象
- LP: ファーストビューの見出し・画像
- CTA: ボタン文言・色・配置
- メール: 件名・送信時刻
- 広告: クリエイティブ・ターゲティング
- 価格ページ: 金額表示形式
注意点
- 同時期の配信（季節要因を排除）
- 十分なサンプル数（統計的有意性）
- 1要素ずつ変更（原因特定のため）
- 最低2〜4週間（誤った早期判断を避ける）
ツール
- Google Optimize（サービス終了）
- VWO、Optimizely
- PostHog、Amplitude
Tufe CompanyのCVR改善
Web CVR診断で現状把握 → Web ProductionでA/Bテスト込みの改善実施。