А вот запускать АБ тест, который никак не повлияет на конечную цель, не стоит. То есть наличие цели и гипотезы, которая к этой цели может привести, обязательно. Основная цель одного из крупных экспериментов была уменьшить отказы с главной страницы и страницы с контактами. В итоге сделали для каждой из этих страниц по два варианта интерфейса.
Один большой раунд пользовательского тестирования приводит к одному унифицированному дизайну. Для дальнейшего его усовершенствования лучше использовать итерационный процесс, при котором небольшие изменения тестируются небольшими группами по 5-10 пользователей до тех пор, пока дизайн не станет окончательным. Поскольку описываемый проект основывался на дизайн-спринтах, разработчики хотели, чтобы он был всеобъемлющим, но также рентабельным. Выбор был сделан в пользу немодерируемого удаленного тестирования, включавшего анализ заснятых карточных сортировок, древовидную сортировку (tree sorting) и тестирование первого клика.
Проводите эксперименты
Теоретически, не существует предела количества комбинаций, которые могут быть протестированы, что и создает мощную альтернативу традиционному тесту. Проведение каждого из этих трех тестов также может потребовать много времени. A/B-тестирование — мощнейший инструмент в маркетинге, который поможет оптимизировать сайт и увеличить целевые показатели. С его помощью ты не будешь терять деньги на внедрение изменений, которые в лучшем случае окажутся бесполезными.
- В таком случае очень просто отследить каждый шаг пользователя и настроить воронку конверсии в Google Analytics для визуализации пути клиента.
- В шаблоне систематизирована информация, которая нужна для настройки A/B-теста и анализа результатов.
- Теперь вы можете добавить до 50-ти вариантов в одну рассылку и узнать, какой из них наиболее эффективен.
- Кроме того, у вас должна быть досточно большая выборка аудитории.
При оценке необходимо учитывать валидность (достоверность) результата. Как это делается в Visual Web Optimizer — покажу в следующий раз. Нажимаем Finish и попадаем на финальную страницу, где можно посмотреть получившиеся комбинации элементов. Кликаем на нужный элемент (в данном случае заголовок), жмем Edit HTML и меняем его на альтернативный. Принцип разделения на факторы и их варианты такой же, как у полнофакторного метода. Но тестируются только некоторые варианты сочетаний.
Дедукция как технология сплит-тестирования
К недостаткам MVT-тестирования можно отнести сложную настройку, которая занимает много времени. Еще одна проблема – для получения достоверных результатов этого теста требуется большой объем трафика. Причем чем больше проверяемых комбинаций, тем шире должна mvt тестирование быть аудитория, которой нужно их увидеть. Ранжирование (от англ. ranking) — результат работы поисковой машины, заключающийся в расположении найденных по запросу пользователя веб-страниц в порядке наибольшего соответствия (релевантности) исходному запросу.
How to Increase Sales with A/B Testing (Includes Examples) — статья, в которой на кейсах показано, как с помощью A/B-тестирования увеличить продажи. Потренируемся подбирать метод проверки гипотезы под конкретную ситуацию. Гипотез может быть так много, что проверить их одним тестом не получится. Поэтому рекомендуем прочитать нашу статью о том, как приоритизировать гипотезы продуктового исследования.
Главное требование мультивариантного теста
Выигрывает версия, которая показала лучшие метрики. Тестировать можно дизайн лендинга, цвет и расположение кнопки call to action, форму регистрации, оформление email-рассылки, текст объявления на сайте и другие изменения. Полагаться на субъективный вкус не стоит, варианты надо тестировать. В этом помогут A/B-тесты, с помощью которых можно проверить эффективность решений при разработке продукта. В общем, это подтверждает важность использования нескольких метрик при анализе результатов тестирования. Но не стоит всегда полагаться только на интуицию и полученный опыт.
Алгоритм создания цели (страницы, на которую попадет пользователь после целевого действия) точно такой же, как в А/B-тестировании. В примере это будет так называемая страница «спасибо». После того, как мы внесли изменения в следующий элемент, добавляется блок Sеction.
Шаг 8. Запустите тест
Итак, если у вас достаточно трафика, вы можете использовать и мультивариантное тестирование, и классические бинарные сплит-тесты – так они будут дополнять друг друга. Например, используйте А/В тесты, чтобы выявить лучшие элементы страниц, а потом с помощью MVT полируйте окончательные варианты страницы. MVT — прекрасный инструмент для последующей оптимизации победившего в сплит-тесте варианта. В то время как А/В не дает существенной информации о взаимодействии переменных на одной странице, MVT делает это. Так вы можете способствовать редизайну, увидев, в каких местах страницы различные элементы оказывают наибольшее влияние. Это особенно полезно при разработке дизайна лендингов.
Переменная — это элемент страницы (например, изображение или заголовок), у которого есть несколько разных версий. В нашем примере переменные — это видео или изображение продукта и 2 разных текста призыва к действию. Именно мультивариантное тестирование позволит вам выяснить, какое сочетание перечисленных изменений (видео или изображение с одним текстом или другим) повысит вашу конверсию. Altcraft Platform позволяет проводить как простые сплит-тесты (A/B), так и более сложное A/B/n тестирование. Чтобы показать, как работать с MVT кампаниями в платформе, мы проведём несложный A/B тест, т.е.
советов по оптимизации промежуточных целевых страниц в партнерском маркетинге
Новый выигрышный заголовок может остаться незамеченным, потому что в фокусе теста — другой элемент. Если вы очень быстро хотите понять, какие элементы вашей страницы наиболее эффективны, проведите MVT с этими элементами — и без них». Из-за множества дополнительных вариаций MVT-тесты требуют большого объема трафика. Например, 3х2 тест (то есть, проверка 2 разных версий трех элементов дизайна) потребует такого же трафика, как и сплит-тест на 9 вариаций. Например, вы используете А/В тестирование, чтобы узнать, как цвет CTA влияет на количество переходов на страницы блога вашей компании.
Результаты A/B-теста показывают, какое решение даст большую конверсию в нужное целевое действие. Например, в каком случае больше пользователей перейдет по ссылке, зарегистрируется на сайте или в приложении, подпишется на рассылку, заполнит форму обратной связи. Есть и более сложные тесты, которые направлены на исследование долгосрочных метрик, таких как средний чек или влияние изменений в продукте на прибыль. Многовариантное тестирование (или MVT) — это оценка эффективности взаимодействия N-ного количества элементов в рамках одного теста, целью которого является выявление наилучшей комбинации. Например, маркетинговая команда предлагает 4 варианта нового дизайна сайта и не может договориться, какой лучше.