CVRという略語だけでは指標は一つに定まりません。購入ユーザー、購入を含むセッション、注文数は異なる問いに答えます。
比較できる集団を定義する
イベント、期間、対象集団、収集範囲を決めます。定義が求める場合は人やセッションの重複を除きます。同じ人が再訪し、一セッションで複数注文することもあるため、数は置き換えられません。
三つの架空比率を比較する
例は800ユーザー、1000セッション、購入者40人、購入セッション45件、注文50件です。セッション当たり注文数は購入を含むセッションの割合とは異なります。GA4はユーザー別とセッション別のキーイベント率を分けています。対象イベントを明示します。
| 指標 | 分子／分母 | 結果 |
|---|---|---|
| 購入ユーザー／ユーザー | 40 / 800 | 5 % |
| 購入セッション／セッション | 45 / 1000 | 4.5 % |
| 注文／セッション | 50 / 1000 | 5 % |
最適化前に測定を確認する
重複、案の割当、収集範囲の違いを確認します。ユーザー単位で無作為化した実験では、再訪を独立とせず、その単位に合う指標を分析します。一つの比率の改善だけでは利益率、満足、継続率の向上を示せません。
出典と確認
- Google Analytics Data API — Dimensions and metrics
- Google Analytics — Minimize duplicate key events with transaction IDs
- Microsoft Research — Metric interpretation pitfalls in controlled experiments
コンバージョンをコンテキストに基づいて解釈します。
コンバージョン率は、定義されたアクションと対象となるユーザー層との関連性を示します。キャンペーン、同意設定、または計測方法を変更すると、エクスペリエンスが改善されなくても比率が変動する可能性があります。
- 比較前にアクション、分母、期間を指定します。
- エラー、遅延、注文品質などのガードレールを追跡します。
- 変化をバリアントに帰属させる前に、同時発生的な変化を記録してください。
一次資料：Microsoft Research — Online experimentation. 関連する方法：実践ガイドを読む.
A/B割り当て：データとSRM
この言語版の詳しい参照メモは英語で提供しています。
A/B tests: check allocation before deciding
An unexplained discrepancy may arise from assignment, the executed journey, logs or analysis filters. SRM supports investigation; it does not measure product improvement.
- Check intended allocation and unit stability before comparing conversions.
- Do not interpret absence of a signal as proof of overall validity.
- Document the quality check, measured effect and deployment decision separately.
Explore the allocation check and its limitations →
Microsoft Research · Diagnosing Sample Ratio Mismatch · Published 2020-09-14 · consulted 2026-10-23
NIST/SEMATECH · Binomial distribution · e-Handbook §1.3.6.6.18 · consulted 2026-10-23