CVR не задаёт единственную метрику. Пользователи-покупатели, сеансы с покупкой и количество заказов отвечают на разные вопросы.
Определить сопоставимую совокупность
Зафиксируйте событие, период, подходящую совокупность и охват сбора. Считайте уникальных людей или сеансы, если этого требует определение. Один человек может вернуться, а сеанс содержать несколько заказов: эти числа не взаимозаменяемы.
Сравнить три вымышленных отношения
В примере 800 пользователей, 1000 сеансов, 40 покупателей, 45 сеансов с покупкой и 50 заказов. Заказы на сеанс — не доля сеансов с покупкой. GA4 различает доли ключевых событий по пользователям и сеансам; укажите выбранное событие.
| Показатель | Числитель / знаменатель | Результат |
|---|---|---|
| Пользователи-покупатели / пользователи | 40 / 800 | 5 % |
| Сеансы с покупкой / сеансы | 45 / 1000 | 4.5 % |
| Заказы / сеансы | 50 / 1000 | 5 % |
Проверить измерение до оптимизации
Проверяйте дубликаты, распределение вариантов и различия охвата. При рандомизации пользователей анализируйте совместимую метрику, не считая повторные посещения независимыми. Улучшение отдельного отношения не доказывает рост маржи, удовлетворённости или удержания.
Источники и проверка
- Google Analytics Data API — Dimensions and metrics
- Google Analytics — Minimize duplicate key events with transaction IDs
- Microsoft Research — Metric interpretation pitfalls in controlled experiments
Интерпретация конверсии в контексте.
Коэффициент конверсии связывает определенное действие с подходящей целевой аудиторией. Изменение кампании, настроек согласия или инструментов может изменить коэффициент без улучшения пользовательского опыта.
- Укажите действие, знаменатель и период перед сравнением.
- Отслеживание защитных механизмов, таких как ошибки, задержки и качество заказов.
- Записывайте одновременные изменения, прежде чем приписывать эффект варианту.
Первичный источник: Microsoft Research — Online experimentation. Связанный метод: прочитать практическое руководство.
Распределение A/B: данные и SRM
Подробные справочные заметки в этой версии доступны на английском.
A/B tests: check allocation before deciding
An unexplained discrepancy may arise from assignment, the executed journey, logs or analysis filters. SRM supports investigation; it does not measure product improvement.
- Check intended allocation and unit stability before comparing conversions.
- Do not interpret absence of a signal as proof of overall validity.
- Document the quality check, measured effect and deployment decision separately.
Explore the allocation check and its limitations →
Microsoft Research · Diagnosing Sample Ratio Mismatch · Published 2020-09-14 · consulted 2026-10-23
NIST/SEMATECH · Binomial distribution · e-Handbook §1.3.6.6.18 · consulted 2026-10-23