A/B тест
A/B Test
Простое объяснение
Сравнение двух вариантов страницы, креатива или сценария на реальной аудитории.
Зачем это нужно
Термин нужен, чтобы корректно читать отчёты, сравнивать каналы и не принимать решение по искажённой интерпретации. Используется в CRO, лендингах, email, рекламных креативах и продуктовых сценариях. Чаще всего это особенно полезно рядом с Split Test, Конверсия.
Как это выглядит на практике
Например, специалист собирает данные за один и тот же период, считает A/B тест по нескольким каналам и уже потом сравнивает результат между ними, а не отдельные сырые цифры.
Формула
Uplift = результат варианта B − результат варианта A
Как считать
Сначала соберите показатели за один период и убедитесь, что база расчёта одинакова для всех сравниваемых объектов. Затем подставьте значения в формулу `Uplift = результат варианта B − результат варианта A` и интерпретируйте результат только в связке с контекстом: качеством трафика, маржой, атрибуцией или этапом воронки.
Частые ошибки
- Считать `A/B тест` по данным из разных периодов или по несопоставимым выборкам.
- Интерпретировать `A/B тест` в отрыве от бизнес-контекста: маржи, качества лидов, стадии воронки или модели атрибуции.
- Сравнивать `A/B тест` между каналами, не проверив, что логика сбора данных и правила учёта одинаковы.