Как провести A/B сплит-тестирование
Первое правило маркетолога — «Тестируй».
- Во-первых, потому что проще продавать людям то, что они хотят.
- Во-вторых, потому что только с помощью тестов можно понять — все ли вы выжали со своей рассылки.
Как это происходит в теории:
Берется какой-то процент ваших контактов (вы сами можете его задать). Они делятся на равные части и им отсылаются разные письма. А потом смотрят на результат и делают выводы. Дальше покажу, как это на практике, а пока важный список.
1. Что можно тестировать:
Открываемость:
- Тема письма — с персонализацией или без, работает ли знак вопроса в конце темы, длина заголовка, работает ли призыв к действию;
- Прехедер (начальный текст, который отображается в некоторых сервисах рядом с темой) — работает или нет.
- Отправитель — можно протестировать как люди реагируют на разные адреса и отправителей. Например, как ваши клиенты открывают письма от Ивана Рождественского, Ивана Анатольевича или Иван (UniSender)?
- Когда ваши клиенты читают письма? Можно легко проверить время отправки.
Текст:
- Как влияют заглавия и подзаглавия;
- Длину текста — написать два разных текста об одном предложении и сравнить, в каком тексте лучше кликали по ссылкам;
- Оформление — считаете, что лучше писать клиентам зеленым цветом на красном фоне? Это тоже можно протестировать:). А если серьезно, то тут широкий круг для экспериментов и копирайтинга.
- Картинки — нужны ли они. Тоже можно проверить.
- Помогает ли уникальный шаблон — если вы решили заказать корпоративный шаблон email, то сможете протестировать, как выросли показатели.
Кликабельность:
- Что лучше ссылки или кнопки?
- Сколько ссылок нужно в письме?
- Где нужно расположить ссылки?
- Стоит ли «прятать» кнопки или оставлять так, как есть.
Конверсию:
- Если у вас подключена веб-аналитика, измерение конверсии — самое необходимое. Как измеряется отдача от рассылки поговорим в уроке.
И естественно в UniSender это можно протестировать. Все, кроме времени прочтения писем и конверсии тестируется с помощью функции «Сплит-тест».
2. Как провести тестирование?
Рассмотрим на примере. Предположим, что мы хотим узнать, какая кнопка в письме работает лучше, даст больше конверсию:
- вариант — синяя;
- вариант — красная.
Так выглядит кнопка:
Чтобы протестировать кнопки, создадим копию письма:
В скопированном письме нажимаем на вкладку «Изменить параметры рассылки»:
Меняем тему письма на «Вариант 2». Делаем это для наглядности. В случае, когда вы тестируете кнопку, заглавие заменять не нужно. Чтобы не влиять на результат теста.
Нажимаем кнопку «Продолжить» и меняем цвет второй кнопки в редакторе:
Готова вторая кнопка. Нажимаем кнопки «Сохранить» и «Продолжить».
Переходим к настройке параметров «Сплит-теста» и нажимаем «Провести сплит-тест»:
Примечание: к настройке «Сплит-теста» можно также перейти из меню «Рассылки» — «Отчеты о сплит-тестах». На этой странице можно создать новый сплит-тест.
Открывается страница с параметрами:
На этой странице:
1) Указываем название сплит-теста.
2) Выбираем список для отправки сплит-теста.
3) Выбираем варианты писем. В UniSender можно протестировать до 10 вариантов, которые можно запустить в сплит-тест.
4) Выбираем тип сплит-теста:
- Без ожидания финальной части.
В данном случае получатели распределяются равномерно между всеми письмами участвующими в сплит-тесте. Формируются и отправляются соответствующие кампании, по одной на каждое письмо - С ожиданием финальной части.
Указываем параметр, по которому определим победителя:
- С максимальным количеством переходов;
- С максимальным количеством открытий;
- Выбрать победителя вручную.
В примере мы тестируем кнопку, поэтому выбираем «С максимальным количеством переходов». На какую кнопку пользователи больше кликнут.
Другие варианты из списка:
- «С максимальным количеством открытий» — в случае теста времени или темы письма;
- «Выбрать победителя вручную» — если не знаете, что тестировать. К примеру, подходы.
Указываем аудиторию.
Смысл сплит-тестирования — отправить лучшее письмо на большую аудиторию.
Выбираем часть аудитории:
В нашем примере — 20% от общей аудитории. На эту часть списка отправляем 2 варианта. 10% — получат первый вариант, другие 10% — второй вариант.
Контакты выбираются случайно. По завершению сплит-теста автоматически определяется письмо-победитель, после чего остальные 80% аудитории автоматически получат лучший вариант письма.
В случае, когда установлен параметр «Выбрать победителя вручную» — перед отправкой на остальные 80% аудитории необходимо вручную выбрать победителя.
Установим время тестирования. Сплит-тест будет рассчитан на 30 минут:
Рекомендуется указывать не менее 3-х часов. Это оптимальное время, за которое люди открывают письма. Если аудитория неактивная, медленная (которая редко проверяет почту), то указываем промежуток 1 — 2 дня.
5) Письмо можем отправить «Прямо сейчас» или «Запланировать отправку» на другое время и дату.
6) Настраиваем интеграцию с Google.Analytics/Яндекс.Метрика, ставим галочку и включаем настройки:
Готово! Сплит-тест создан.
Нажимаем кнопку «Запустить»:
Переходим к отчету по сплит-тесту из меню «Рассылки» — «Отчеты о сплит-тестах».
На странице отображается список всех сплит-тестов. Выбираем нужный сплит-тест, после чего будут показаны отчет и статистика по письмам:
Поздравляем, теперь вы умеете проводить сплит-тестирование.