54
32%
А
B
50%
14%
50%
ПРЕОБРАЗОВАНИЕ
Схема 4. Идея A/B тестирования
Выбор объекта тестирования зависит от цели и задач, которые ставит перед
собой маркетолог. Чаще всего маркетологи тестируют
следующие элементы
веб-страниц:
–
Текст и внешний вид конверсионных кнопок, а также их расположение.
–
Заголовок и описание продукта.
–
Размеры, внешний вид и расположение конверсионных форм.
–
Макет и дизайн страницы.
–
Цену товара и другие элементы бизнес-предложения.
–
Изображения товаров и другие иллюстрации.
–
Количество текста на странице.
Анализ результатов. Эффект от внесения изменения определяют как разность
между средними значениями ключевого показателя в сегментах.
Чем больше
количество посетителей (трафик) в сегментах А и В, тем меньше разброс средне-
суточных значений показателя. При небольшом трафике из-за большего разброса
значений случайной величины потребуется больше времени для проведения экс-
перимента,
но в любом случае это лучше, чем вовсе не проводить эксперимент.
Оценить значимость результатов. Для сравнения случайных величин
математики придумали целый раздел под названием проверка статистиче-
ских гипотез. Гипотез всего две: «нулевая» и «альтернативная». Нулевая
гипотеза
предполагает, что разница между средними значениями показателя
в сегментах незначительна. Альтернативная гипотеза предполагает наличие
существенной разницы между средними значениями показателя в сегментах.
Инструменты. Для организации
теста необходим инструмент, позволя-
ющий разметить аудиторию по сегментам А и В,
посчитать значения ключевых
показателей отдельно в каждом сегменте.
Подводя итоги, вышеизложенное можно разложить по шести шагам проведения
A/B-тестирования от постановки цели до определения статистической погреш-
ности: 1. Определение цели. 2. Определение метрики. 3. Разработка гипотезы.
4. Подготовка эксперимента. 5.
Проведение эксперимента. 6. Анализ результатов.
Достарыңызбен бөлісу: