Как сделать АБ-тест на Майндбокс

Как проверить маркетинговую гипотезу в “боевом” режиме? Используйте функцию AB test в Mindbox. Рассказываем, как контролируемый сравнительный эксперимент помогает создавать эффективный контент.

Что такое АБ-тесты и зачем они нужны 

АБ тест в Майндбокс – это надежный способ проверки вариантов рассылок на максимальный отклик у получателя. Под откликом могут подразумеваться: открытия, клики, заказы и любые другие целевые действия.

Успешный вариант, найденный АБ-тестированием, помогает в решении глобальных маркетинговых задач:

• оптимизация расходов;
• увеличение среднего чека;
• рост продаж;
• увеличение показателей Open Rate и/или Click Rate

и других.

Проводить тесты можно в любых каналах коммуникации: пуши, SMS, поп-апы и блоки на сайте, но чаще всего тестирование проводят в email.

Встроенный инструмент AB тестов в Mindbox позволяет на базе одной рассылки создавать разные варианты для тестирования. А после проведения эксперимента выводит отчет в общем интерфейсе. Поэтому сравнивать показатели удобно.

Как провести АБ-тестирование? Вот несколько шагов, которые нужно пройти:

• Определение гипотезы для рассылки (т.е. что именно мы проверяем: от кликабельности темы письма до влияния цвета кнопки call-to-action на целевое действие клиента);
• Создание двух или более вариантов рассылки, отличных только в одном элементе (это необходимо для чистоты эксперимента). Чем больше вариантов тестируем одновременно – тем больше будет длиться тест и тем большая выборка потребуется для подтверждения результата;
• Автоматическая сегментация базы платформой Mindbox, отправка двух или более рассылок по разным частям (система сама равномерно распределяет аудиторию, достаточно выбрать общую базу);
• Оценка и сравнение показателя, который планировалось улучшить (например, тема, контент, кнопка, CTA, любые целевые действия пользователя: открытие, клик, заказ и др, время отправки рассылки);
• Выбор варианта-победителя, который обычно отправляется на всю базу (если же это было разовое тестирование гипотезы, то полученное в нем знание будет использоваться в дальнейшей работе. Например, кнопка синего цвета дает больше кликов, чем зелёная).

Какие метрики можно проверить АБ-тестом

Для построения гипотезы необходимо чётко понимать, что именно мы тестируем, на изменение какого показателя ориентируемся.  Пример хорошей гипотезы: тема/офер/призыв к действию A даст лучший эффект (открываемость рассылки/заказы из рассылки/переходы из рассылки), чем Б.

К метрикам, которые можно проверить инструментом, относятся:

• открытия
• клики по ссылкам/кнопкам
• заказы, совершенные из рассылки
• любые целевые действия клиента

Давайте разберем эти пункты подробнее.

Открытия (Open Rate)
На увеличение OR могут влиять:

Хедер

• СTA
• Обращение по имени
• Маленькая длина
• Наличие эмодзи

Прехедер

• наличие или его отсутствие
• СTA

Количество кликов (Click Rate)
На увеличение CR могут влиять:

• визуальное оформление кнопок СTA
• порядок блоков
• верстка товарной сетки
• наличие СTA под каждым из товаров/услуг
• социальные доказательства
• вывод старой и новой цены
• вид графических материалов (подача товара/услуги)

Количество заказов из рассылки (Conversion Rate)

На увеличение показателя могут влиять:

• использование рекомендательных технологий
• наличие СTA
• вывод старой/новой цены или стоимости с/без скидки
• мотивация бонусами: от баллов программы лояльности до бесплатной доставки

Маленькая выборка аудитории дает недостоверный результат, поэтому CDP-платформа Майндбокс разработала и внедрила автоматические способы расчета и сегмента, и результатов.

Что важно учесть при проведении АБ-теста

Суммируем топ-3 параметра для успешного тестирования:

• Сформулированная и измеримая в метриках гипотеза;
• Достаточный объем базы контактов для теста (Майндбокс посчитает его автоматически);
• Одно тестирование – один параметр, чтобы быть уверенными в его значимости и влиянии на целевые действия клиента.

В своей работе агентство DataGrow использует все возможности CDP-платформы Майндбокс для создания самого прибыльного взаимодействия бренда с клиентом, в том числе, через инструмент AB-тестирования. Приходите, если хотите на тестах проверить свои маркетинговые гипотезы!