A/B-тесты
A/B-тест сравнивает два лендинга на одном трафике: одна рекламная ссылка, одинаковые условия, трафик 50/50. Посетитель закрепляется за вариантом в своём браузере, боты в тест не попадают.
Тесты открываются со страницы кампании — блок A/B-тесты. В кампании одновременно идёт один тест.
Подготовьте тест#
Нажмите Подготовить тест и заполните:
- Что сравниваем — поток кампании или основной маршрут, и два лендинга. Нужного варианта нет — загрузите лендинг.
- Как определим победителя — Главная цель: событие, по которому сравниваются варианты. Цель уже должна передаваться в трекер — без событий победителя не определить.
- Сколько данных нужно — выберите ожидаемый прирост: +10, +20 или +30%. Трекер по реальному трафику маршрута посчитает нужную выборку на вариант и срок: дни набора плюс дни ожидания конверсий.
Трекер сохранит копии файлов обоих лендингов. Когда статус обновится, нажмите Запустить тест 50/50. Рекламная ссылка остаётся прежней.
Пока тест идёт#
На странице теста видны участники и конверсия каждого варианта, План теста и сроки: Запуск, Конец набора, Итог не раньше. Кнопка Обновить цифры пересчитывает результат, Скачать CSV выгружает данные.
План зафиксирован: если изменить маршрут кампании или правила цели, вывод станет недоступен.
Результат#
Победитель определяется один раз по главной цели — после набора выборки и ожидания конверсий. Нажмите Зафиксировать итог:
- CR — доля участников, достигших главной цели хотя бы раз;
- показывается 95% интервал разницы конверсий;
- если разница значима, трекер покажет победителя.
Применить победителя ставит выбранный лендинг на поток или основной маршрут кампании.
Остановить без вывода — новые посетители пойдут по обычному маршруту, победитель не будет определён, продолжить тест нельзя.
Что учесть#
- Участник определяется cookie браузера: очистка cookie и разные устройства снижают точность.
- Если распределение заметно отличается от 50/50, проверьте источник трафика и ошибки показа.
- На малой выборке эффект обычно завышен — не останавливайте тест раньше плана.