Шаблон A/B-теста в опросе

Шаблон для UXA/B-тест

Готовый A/B-тест внутри опроса: респондент случайно видит один из двух вариантов баннера и оценивает его. Сравнив ответы групп, вы поймёте, какой вариант сильнее, ещё до запуска рекламы.

4 вопросаоколо 2 минут2 варианта по 50%сравнение групп в отчёте

Шаблон скопируется в ваш аккаунт. Загрузите свои варианты: изображения, тексты или видео.

Живой пример опросаОткрыть в новой вкладке

Так опрос увидят респонденты — его можно пройти прямо здесь.

Что такое A/B-тест в опросе и зачем он нужен

В A/B-тесте каждый участник видит только один вариант, поэтому его оценка не зависит от сравнения с другим. Это ближе к реальности: в рекламе и на сайте человек тоже видит только одну версию. Сравнивая ответы двух групп, вы выбираете вариант, который сильнее влияет на интерес и намерение действовать.

В отличие от A/B-теста на сайте, опрос даёт результат до запуска и объясняет причины: можно спросить, что ожидает человек и что его привлекло. Подробнее о выборе метода — в статье «Как выбрать методику: Кано, MaxDiff, карточная сортировка или A/B-тест».

Когда применять A/B-тест в опросе: при выборе рекламного креатива, заголовка лендинга, упаковки, ценового предложения или текста письма. Опросный A/B-тест полезен, когда трафика на сайте мало для классического эксперимента или когда нужно принять решение до запуска. Для честного сравнения важно, чтобы группы респондентов были похожи по составу.

Честная оценка

Респондент не сравнивает варианты и оценивает тот, что видит.

Результат до запуска

Не нужно тратить бюджет на тест в рекламе.

Причины выбора

Открытые вопросы объясняют разницу в цифрах.

Как устроен шаблон A/B-теста

В шаблоне вопрос с A/B-показом и три вопроса для оценки. Варианты показываются поровну, по 50%.

A/B-показ

  1. Посмотрите на рекламный баннер — респондент видит вариант A или B вымышленного фитнес-приложения «Пульс»

Оценка варианта

  1. Насколько вам интересно узнать о приложении больше?
  2. Нажали бы вы на кнопку на баннере?
  3. Что вы ожидаете увидеть после нажатия на кнопку?

Долю показа можно настроить для каждого варианта, а самих вариантов может быть больше двух. Креативами бывают изображения, тексты или видео.

Как провести A/B-тест в опросе

Различайте варианты одним-двумя важными элементами, иначе будет непонятно, что сработало.

1

Подготовьте варианты

Например, разные заголовки при одинаковом дизайне.
2

Задайте доли показа

Обычно 50/50, для трёх вариантов — по трети.
3

Добавьте метрики

Интерес, намерение кликнуть, понятность предложения.
4

Соберите выборку

Для заметной разницы нужно хотя бы 50–100 ответов на вариант.

Для сравнения макетов до разработки пригодится статья «Как сравнить два варианта прототипа до разработки», а для проверки концепций — материал о концепт-тестах.

Выберите сильный креатив до запуска

Скопируйте шаблон и загрузите свои варианты.
Использовать шаблон

Как читать результаты A/B-теста

В отчёте видно, сколько раз показан каждый вариант. Чтобы сравнить группы, отфильтруйте ответы по показанному варианту. Сравнение удобно оформить в таблице: метрики по строкам, варианты по столбцам. Все типы вопросов и возможности отчётов — в разделе «Функционал Testograf».

  1. Сравните ключевые метрики. Средний интерес и долю ответивших «Да» на вопрос о клике для A и B.
  2. Проверьте объём групп. Небольшая разница на маленькой выборке может быть случайной.
  3. Прочитайте ожидания. Ответы о том, что ждёт человек после клика, подскажут, как доработать посадочную страницу.

Результаты видны сразу

Фильтр по варианту, графики и выгрузка в XLSX и PDF. Откройте отчёт демо-опроса, заполненного тестовыми ответами.Посмотреть результаты
Нажали бы вы на кнопку на баннере?Скорее да53 %Скорее нет21 %Да, точно16 %Точно нет11 %данные демо-опросаОткрыть отчёт →

Советы по A/B-тестам в опросах

Как выбирать дизайн на основе данных, рассказано в статье «Тестирование и выбор логотипа через онлайн-опросы».

Меняйте одно за раз

Так понятно, какой элемент повлиял на результат.

Одинаковые вопросы для всех

Оценка должна быть единой для обоих вариантов.

Тестируйте на целевой аудитории

Подберите респондентов, похожих на будущих клиентов.

Частые вопросы

Сколько вариантов можно сравнить?

Два и больше — каждому задаётся своя доля показа.

Какие форматы поддерживаются?

Изображения, тексты и видео.

Как сравнить результаты групп?

В отчёте отфильтруйте ответы по показанному варианту и сравните графики по оценочным вопросам.

Чем отличается от парного сравнения?

В парном сравнении человек видит оба варианта и выбирает лучший, а в A/B — оценивает только один.

Сколько ответов нужно на каждый вариант?

Чем меньше ожидаемая разница, тем больше нужна выборка. Для заметной разницы обычно хватает 50–100 ответов на вариант, для тонких различий — несколько сотен.

Заключение

Шаблон A/B-теста в опросе помогает выбрать сильный баннер, заголовок или экран до запуска и понять причины разницы. Скопируйте шаблон, загрузите свои варианты и сравните оценки двух групп.

Другие шаблоны UX-методов

Все шаблоны опросов

Сравните варианты в A/B-тесте

Готовый шаблон, случайный показ вариантов и фильтры в отчёте — без настройки с нуля.

Результаты демо-опроса Так выглядит отчёт по A/B-тесту
Продолжая пользование настоящим сайтом, Вы выражаете своё согласие на обработку Сookie-файлов в соответствии с Политикой использования Cookie-файлов