Возьмем в качестве примера стандартное описание товара на Aliexpress. А на условной Ламоде описание товаров оформлено в виде списка с использованием двух разных стилей (для характеристики и ее описания). При наличии подобных материалов есть два пути для тестирования. Заголовок статьи – первое, что видит пользователь, решивший посетить ваш сайт. Если заголовок изначально не привлекает внимание приходящей аудитории и не способен заставить человека прочитать статью, то вы уже потеряли часть прибыли.
Optimizely отличается высокой персонализацией и гибкостью, но не может интегрироваться с продуктами Google. В постановке целей добавляют основную метрику, изменения которой будут отслеживаться. Как мы уже рекомендовали ранее, добавьте отслеживание дополнительных значений — их изменения тоже можно использовать в отчете и для составления дальнейших гипотез. Он отражает, как часто пользователи переходят по ссылкам. Например, при CTR 3% три человека из ста перешли по ссылке.
Выберите страницу, которую будете тестировать
Между тем инструмент помогает оптимизировать воронку продаж и повысить лояльность клиентов. В Mindbox можно тестировать между собой рассылки, акции и алгоритмы рекомендаций. Для этого определяется целевое действие, размер выборки и желаемый рост конверсии. Подробнее в статье «Как настроить Контрольную Группу и A/Б-тестирование в рассылке». По окончанию тестирования снимите результаты и посчитайте статистическую значимость теста. Вариант, который статистически значим и отличается в лучшую сторону (например, заработал больше денег), считается победителем.
Разработчики Optimizely пошли по пути улучшения одного продукта, а не расширения возможностей в разных направлениях. Поэтому эта программа подходит только для А/Б тестирования. Но у нее настолько простой и понятный интерфейс, что самым сложным будет добавить код в шапку сайта. Визуально он похож на графический редактор, a/b тестирование в котором можно изменить любой элемент — цвет, текст, размер, расположение. Чтобы исследовать изменения на лендинге, используйте вариант «Эксперимент с переадресацией» — он будет показывать две разные версии сайта выделенным сегментам аудитории. В остальных случаях можно использовать вариант A/В тестирование.
Как настроить Google Optimize
Результаты сплит-теста можно считать достоверными только при определенном уровне статистической значимости. Однако, если речь идет о большой выборке, значительных изменениях или высоком показателе статистической значимости, то тесты могут длиться и в течение одного-трех месяцев. P — это количество пользователей по истории, которое совершали нужно действие (например, делали покупку со старой версии лендинга). Если исторических данных нет, то используется значение равное 0.5 (50%).
Наша гипотеза состояла в том, что конверсия на варианте А будет отличаться от конверсии на варианте В. Нам нужно было понять, на какую промостраницу сайта лучше вести рекламную кампанию. Другими словами, A/B-тест помогает во всех ситуациях, когда вы предполагаете, как можно улучшить продукт. Что такое A/B-тестирование и как его провести с помощью инструмента «Эксперименты» в Яндекс Метрике, рассказала Валерия Чистова, веб-аналитик iConText Group.
Заголовки страниц и копирайтинг в целом
Это не просто тестирование, а сравнение эффективности двух вариантов страницы. Но не принципиально разных вариантов, а одной и той же страницы с небольшими изменениями, которые, по мнению вебмастера или дизайнера, могут увеличить доходность ресурса. К примеру, по результатам А/В-теста фактический коэффициент конверсии вырос на 1%, как мы и предполагали в гипотезе. В результате выбранных изменений, метрика выросла, гипотеза подтвердилась.
A/B-тестирование разных вариантов страниц — не главная задача Clickmeter. Изначально он предназначен для сравнения эффективности различных рекламных кампаний. С его помощью вы сможете сравнить партнёрские программы из одной ниши, распределяя трафик в заданной пропорции.
Можно ли проводить несколько A/B-тестов одновременно?
Для получения точных данных, важно придерживаться определенных правил на протяжении всего тестирования — от постановки цели до анализа результатов. В этом примере в результате теста стало понятно, что новая РК приносит где-то на 25% конверсий больше, позволяет увеличить приток клиентов на сайт и прибыль. В ходе A/B-тестирования было принято решение создать одну масштабную рекламную кампанию, в которой будут объединены все ранее созданные мелкие.
- Для начала тестирования кликните на кнопку «Добавить вариант», чтобы внести изменения на страницу согласно сформулированной гипотезе.
- В примере выше мы создали мок-объект mock_notification_service.
- Цена сервиса A/B-тестирования зависит от количества выполненных вами тестов.
- В таком случае основной целевой аудиторией исследования как раз являются пользователи, увидевшие ваши разные объявления.
- Решите, с чего нужно начать, чтобы не распыляться и не проводить тестирование на большом количестве элементов.
Эксперимент в Яндекс Метрике показал, что инструмент Varioqub достаточно прост в настройке и понимании полученных результатов. Только так вы сможете подтвердить или опровергнуть ваши гипотезы. Если тестирование проведено корректно и показало статистически значимый результат, а внесенные изменения себя оправдали, это не повод останавливаться. Во-вторых, рекомендуется проводить несколько итераций теста для одного и того же элемента, причем в каждой новой контрольным вариантом делать экспериментальную версию из предыдущего теста.
Калькулятор статистической значимости А/Б-теста
Некоторые элементы вашего маркетингового арсенала влияют на конверсию больше, чем другие. К примеру, изменение одного слова в тексте email-рассылки, вероятно, не окажет большого влияния на конверсию или кликабельность ваших ссылок в письмах (CTR). Например, один популярный тест показал, что CTA-кнопка красного цвета была эффективней зеленой на 21%. Другими словами на красную кнопку кликали на 21% чаще, чем на зеленую. Рано или поздно вам будет важно узнать, насколько хорошо работает ваш сайт, email-рассылка или реклама.
Какие инструменты сплит-тестирования использовать
Лучше всего выбрать 1-3 метрики, изменения которых будем отслеживать. Если метрик будет много, то точно определить эффект теста будет проблематично. Любые изменения вносятся в продукт с конкретной целью, она либо помогает пользователю, либо решает бизнес задачи (супер, если все сразу). В нашем случае поступает задача от старшего продакта — увеличить число активных пользователей.
