April 2021

Но это не всегда история про успешные тестирования и постоянный рост. В первую очередь надо думать, как не сделать проект хуже. Например, есть лендинг по производству и продаже пластиковых окон, на который идет трафик с контекстной рекламы (аудитория). Владелец посмотрел вебинар и узнал, что сейчас в тренде не прямоугольные кнопки, которые установлены на сайте, а круглые. Последние увеличивают конверсию, то есть дают больше заказов.

Сделан удобный графический редактор, в котором можно вносить изменения любых элементов страницы. Сервис поддерживает проведение сплит-тестов, мультивариантных исследований, интеграцию с GA, имеет 7 критериев настройки таргетинга. Сервис поддерживает сплит-тестирования на любой странице сайта. Может отслеживать навигацию, конверсии, таргетинг (15 параметров). У него тоже есть визуальный редактор, как и в Optimizely. Разработчики Optimizely пошли по пути улучшения одного продукта, а не расширения возможностей в разных направлениях.

А/В-тестирование в Яндекс Метрике

В остальных случаях можно использовать вариант A/В тестирование. Выберите программу, с помощью которой будете проводить тестирование. Для подключения системы нужен доступ администратора сайта — код события нужно будет добавить в шапку на исследуемой странице. Изучение поведения пользователей на сайте помогает сделать интерфейс более удобным, повысить продажи и улучшить позиции сайта в выдаче.

Выше мы обсуждали людей, которые не верят бизнесу, а верят только людям. Есть еще категория людей, которая доверяет только известным личностям или брендам. Размещаем эти варианты и оцениваем количество конверсий с каждого. Делаем легкопоглощаемый материал без лишних претензий на экспертность, разбавляем картинками и выпускаем в тираж.

Кому пригодится проведение A/B тестов

Для нашего тестирования ключевая метрика — количество заказов с лендинга, то есть мы будем считать оплаченные заказы клиентов, пришедших с сайта. Поэтому использование АБ-тестирования в нынешних реалиях необходимо проектам (сайтам, приложениям и т.п.) как воздух. АБ-тестирование необходимо для получения объективной информации о всевозможных способах улучшения текущей версии продукта.

Так что любая крошечная деталь может вывести ресурс на более высокую прибыль. Сплит-тестирование в своем изначальном виде предполагает некое сравнение двух совсем разных страниц. То есть не лендинга с красной кнопкой и идентичного лендинга с зеленой кнопкой, а два кардинально отличающихся друг от друга лендинга. А/В тестирование проводят, когда хотят оптимизировать ресурс, повысить продажи или выполнить анализ работы ресурса.

Помните, что 80% мощности является стандартом для инструментов A/B-тестирования. Чтобы достичь такого уровня, вам понадобится либо большой размер выборки, либо грандиозный эффекта, либо более длительный тест. Несмотря на свою популярность, A/B-тестирования являются лишь одним из видов онлайн-исследований. Вы также можете проводить многовариантные тесты или использовать метод многоруких бандитов. Сравниваются два варианта (контрольный и тестовый) нескольких элементов в различных комбинациях. Например, можно одновременно проанализировать кнопку целевого действия, блок с отзывами, логотип и т.

Google Marketing Platform (Google Optimize)

Unbounce популярен, потому что включает в себя множество утилит, помогающих создавать лендинг с нуля. Можно собрать его, опубликовать, протестировать и оптимизировать в одном интерфейсе. Определившись с задачей и элементом, над которым будет проводиться эксперимент, переходим к разработке этого элемента.

• Нужно создать новый интерфейс на уровне макетов, собрать интерактивный прототип и пронаблюдать, как пользователи с ним взаимодействуют.
• Может отслеживать навигацию, конверсии, таргетинг (15 параметров).
• На старте у вас будет мало трафика, а значит небольшая выборка для эксперимента.
• C одной стороны, мы можем протестировать всё, что приходит в голову каждому члену команды, — от цвета кнопки до уровней сложности игры.
• Это не ускорит конкретный тест, но позволит не тратить время на те тесты, которые не покажут заметную разницу.
• Например, в крупных компаниях есть автоматическая система, которая перед проведением теста аудитории разбивает пользователей на группы и определяет величину выборки.

Принятие решения раньше, чем должно закончиться тестирование, может привести к ошибке, так как еще неизвестны все последствия внедренных изменений. После передаем в Метрику информацию о варианте сайта, который увидел пользователь. Для этого создаем параметр тестирования, которому присваиваем ав тестирование соответствующее значение. Параметр отправляется в Метрику и учитывается при формировании отчета по «параметрам визитов». Имеет значение как сам текст, так и расположение блока с товарами и услугами, его плотность (количество столбцов на странице), соотношение размеров изображения и текста.

Если говорить про основные, то это будет Яндекс Метрика и Google Аналитика. В них можно задать цели после чего проверить, сколько посетителей зашло на страницу и сколько на этой странице вышло конверсий. Чем больше выборка, тем больше уверенность и стабильность, поскольку результаты A/Б тестирования становятся все ближе и ближе к точному пониманию предпочтений аудитории. Это означает, что вы можете быть уверены, что изменения, которые вы вносите в свои веб-страницы, являются наиболее лучшими из возможных. Основное направление компании ― познакомить людей с продуктом и продать как можно больше.

Калькулятор статистической значимости А/Б-теста

Для тестов, в которых у специалиста больше контроля над аудиторией, например в случае email-рассылками, это можно сделать вручную. Этот подход поможет настроить тест должным образом и получить репрезентативные результаты. Теперь поговорим о том, как правильно проводить сплит-тесты. Победила Альтернативная гипотеза.Тест подтвердил наше предположение, событие А привело к изменению метрики Б. Продолжительность зависит от посещаемости ресурса, но в любом случае лучше проводить a/b-тестирование не менее 2 недель. Доля пользователей, совершающих целевые действия.

Что такое А/Б-тест или сплит-тест?

За исключением тех случаев, когда необходимо персонализировать опыт для определенного источника. Серьезные изменения наподобие уменьшения отвлекающих факторов или добавления ключевой информации обычно сильно влияют на страницу. Построение гипотезы.В эту категорию определяются страницы, виджеты или процессы, которые работают не очень хорошо и требуют работы над ошибками. Для оптимизации сайта необходимо понять, что и почему делают ваши пользователи. Для достоверности рекомендуем одновременно тестировать не более одного элемента рекламы. Например, проверять только разные тексты или только разные иллюстрации.

Ниже изображены два примера распределения значений показателя в сегментах. По горизонтальной оси идет значение ключевой метрики, взятой для теста. Плотность может принимать значения от 0, если значение ни разу не встретилось, до 1, если при всех измерениях было только это значение.

Шаг 2. Определяем метрики

Пользователи ресурса случайным образом делятся на сегменты. Один из сегментов остается без изменений — это контрольный сегмент “A”, на основе данных по этому сегменту мы будем оценивать https://deveducation.com/ эффект от вносимых изменений. Пользователям из сегмента “B” показываем измененную версию ресурса. Ценность цифровых инструментов для продаж заключается в их управлении данными.

Чтобы не сомневаться в достоверности результатов, тест лучше проводить с контрольной выборкой. Для этого нужно разделить аудиторию, на которой будут тестироваться варианты, не на две группы (A и B), а на три (A, A и B). Двум группам показать одну версию, третьей — другую. Это выявит, повлияли ли внешние факторы на результат теста и нет ли ошибок в сборе метрик. Это может быть какая-то кнопка или форма для регистрации, картинка в статье, видеоролик в боковой панели, который идет фоном, или же вовсе количество символов в статье.

Например, если вы тестируете CTA на странице и основной показатель — количество лидов, то не стоит уделять много внимания времени на сайте или глубине просмотра. При запуске сплит-тестов оба варианта должны работать в одно время, иначе есть вероятность, что на результат повлияют сторонние факторы. Как вы определите размер выборки, также будет зависеть от инструмента.

Как провести A/B-тестирование на примере?

В рамках примера с пластиковыми окнами в качестве дополнительных показателей допустимо отслеживать средний чек и чистую прибыль. Цель тестирования должна совпадать с глобальной целью компании. Продолжим рассматривать пример из начала статьи про компанию, занимающуюся производством и продажей пластиковых окон. Основная цель — увеличение объема продаж с лендинга, на который «льется» трафик с контекстной рекламы. A/B тесты нужны всем — продакт-менеджерам, маркетологам, продуктовым дизайнерам, вебмастерам и т.п. Если говорить проще, то в этом инструменте нуждаются все, кто хочет улучшать свой продукт, делать его удобнее и приятнее для целевой аудитории.