А/В-тестирование сайта (сплит-тестирование) – это метод, который применяется для оценки эффективности веб-страниц. А/В-тесты позволяют повысить конверсию целевых страниц, а значит, и доходность интернет-проекта.
С помощью метода сравнивают несколько вариантов одной страницы, каждый из которых показывают одинаковому количеству посетителей. Через некоторое время подводят итоги теста и оставляют тот вариант, который показал лучший результат (чаще всего выбирают страницу с более высокой конверсией).

Чаще всего тестируют изменение только одного элемента, например кнопки
Зачем нужно А/В-тестирование
Представьте, что вы запустили образовательный проект. Конверсия посадочной страницы составляет 3%, но вы желаете увеличить показатель до 6%. Тогда вы формулируете предположение, как этого можно добиться — гипотезу.
Например, у вас появилась идея, что короткую форму заявки заполнять проще, чем длинную, и стоило бы убрать несколько полей. Чтобы это проверить, нужно провести тест. Запустить два варианта лендинга и спустя время посмотреть, какой из них лучше работает. Действительно ли короткую форму заявки заполняют чаще, чем длинную.
Обычно тесты проводят крупные компании, так как цена ошибки при высоком трафике высока.
При формировании гипотез хорошей практикой является их оценка как с точки зрения результата (к примеру, вы уверены, что гипотеза №24 увеличит конверсию на 10%), так и с точки зрения затрат на разработку. Это позволит эффективно приоритизировать гипотезы.
Таким образом, А/В-тестирование позволяет:
- выяснить влияние отдельных компонентов страницы на поведение пользователей;
- исключить субъективность в принятии решений и возможные факторы риска;
- сконцентрировать финансовые и трудовые ресурсы на уже работающих для вашей аудитории элементах;
- улучшить конверсию любого действия и экономических метрик (объем выручки, величину среднего чека).
Как работает А/В-тестирование
Механизм метода А/В-тестов таков: нужно разделить посетителей ресурса на группы и направить на две разные страницы. Половине пользователей показываете контрольную страницу А, а другой – измененную страницу В. Такое разделение 50/50 не является единственно возможным. Вы можете делить трафик 70/30 или, наоборот, 20/80.
Чтобы получить статистически значимые результаты, необходимо исключить ситуацию, когда одному пользователю показываются оба варианта. То есть один пользователь должен принадлежать к одной аудитории. Обычно для этого используется специальный параметр, который пишется в cookie браузера.
При этом важно учитывать все каналы трафика (социальный, поисковый, рекламный, email) и делать замеры в одно время. Желательно также снизить влияние внутренних факторов – любых действий операторов call-центра, сервисной службы, модераторов ресурса, сотрудников редакции.
Какие элементы можно тестировать
Выбор компонента тестирования зависит от целей и задач.
Фактически каждый элемент веб-страницы, конвертирующий посетителя в клиента, может быть протестирован. В классическом варианте тестируют изменения одного компонента. Но существует мультивариантное (MVT) А/В-тестирование нескольких измененных элементов.
Обычно тестируют следующие элементы:
- заголовки, подзаголовки;
- тексты, описания продуктов;
- количество контента на странице;
- изображения;
- внешний вид и текст СТА-кнопок;
- отзывы;
- регистрационные формы;
- дизайн и макет страницы;
- цены, акции, условия доставки и другие бизнес-компоненты.
Как провести сплит-тестирование
При проведении А/В-тестирования не стоит руководствоваться исключительно опытом и интуицией. Такой подход не принесет должного результата, а время и ресурсы будут потрачены впустую. Следуйте алгоритму:
- Определите цель А/В-тестирования и показатели, которые хотите улучшить.
- Проанализируйте сайт при помощи инструментов Яндекс Метрики и определите, как именно посетители взаимодействуют с ним.
- Сформулируйте гипотезы. Например, вы предполагаете, что конверсию сайта можно повысить, если поднять форму подписки на первый экран сайта или изменить цвет конверсионной кнопки.
- Расставьте приоритеты. Определите наиболее значимые элементы, изменение которых приведет к максимальному результату.
- Рассчитайте необходимый размер выборки с помощью статистических формул или воспользуйтесь специальными сервисами.
- Проведите А/В-тестирование важных гипотез. Например, определите количество подписок при изменении регистрационной формы и цвета кнопки.
- Проанализируйте результаты А/В-тестирования. Обычно для этого используют математические формулы или специальные сервисы. Если конверсия повысилась значимо, то ваша гипотеза верна. Если существенного роста не наблюдается, вернитесь к пункту 3 и составьте новый список идей улучшения.
Главное в этом процессе — не делать поспешных выводов. Когда вы получили первые данные А/В-тестирования, которые вас удовлетворяют, есть большой соблазн прекратить эксперимент. Спешить не следует, потому что значения основных показателей могут меняться на протяжении нескольких дней.
Для сравнения случайных параметров оценивают средние показатели, поэтому потребуется 7–14 дней для накопления данных. Следует отметить, что чем больше емкость сегмента, тем меньше разброс суточных показателей. Поэтому при небольшом трафике тестирование может занять больше времени.
Запускать А/В-тесты лучше через специальные сервисы, которые позволят правильно разметить аудиторию и собрать статистические данные. Например, VWO, Mindbox, Varioqub и «Яндекс Метрика».
Главные мысли

