А/B тестирование

Что вы узнаете на этой странице:

  1. Что такое A/B-тестирование?
  2. Как создать A/B-тест?
  3. Как проходит A/B-тестирование?
  4. Какие метрики считает A/B-тест?
  5. Какие требования к запуску А/В-теста?
  6. Какие параметры тестирования можно настроить?
  7. Что такое раунд тестирования?
  8. Почему A/B-тест прервался?
  9. Как приостановить A/B-тест вручную?
  10. Что будет с карточкой товара при остановке или завершении теста?
  11. Можно ли создать несколько A/B-тестов для одной рекламной кампании?
  12. Как узнать, что A/B-тест остановился или завершился?
  13. Можно ли изменить A/B-теста после запуска?
  14. Влияет ли A/B-тестирование на работу рекламной кампании?

Что такое A/B-тестирование?

Это способ проверить, какое фото товара лучше работает в рекламе. Вы выбираете несколько вариантов заглавных фото для карточки товара, а система по очереди показывает их и собирает статистику по каждому: просмотры, клики, заказы. В итоге вы видите, какая картинка приносит больше результата, и можете оставить самый эффективный вариант.


Как создать А/B-тест?

Выполните следующие шаги:

  1. Откройте раздел «A/B-тестирование» и нажмите «Создать».
  2. Выберите рекламную кампанию для проведения теста. Доступны кампании со статусом «Активна» или «На паузе».
  3. Укажите название тестирования.
  4. Выберите до 10 изображений, которые хотите протестировать. В тестирование автоматически загрузится действующее изображение из карточки товара — его можно оставить или удалить.
  5. Настройте параметры теста: количество просмотров и длительность раунда.
  6. Нажмите «Создать тестирование». Если рекламная кампания уже запущена, тестирование запустится сразу.

Если рекламная кампания на паузе, тест не запустится сразу — сначала запустите кампанию на Wildberries. Через некоторое время Радар автоматически синхронизируется с маркетплейсом, и A/B-тест запустится самостоятельно.

Чтобы не ждать после запуска рекламной кампании, откройте A/B-тест в Радаре и нажмите «Обновить». Тестирование запустится принудительно.

Если вы сами остановили тестирование, оно не запустится автоматически.


Как проходит A/B-тестирование?

Работа теста.

После запуска система поочерёдно показывает изображения в рамках раундов. Для каждого варианта собирается статистика: просмотры, клики, CTR и другие показатели. Раунд завершается при достижении лимита просмотров в раунде или по истечении времени раунда, после чего система переключает изображение.

Когда одно из изображений по сумме раундов набирает лимит просмотров на фото, система убирает его из тестирования. Эта картинка больше не участвует в раундах, но тестирование продолжается.

Завершение теста.

Когда все изображения набирают лимит просмотров на фото, система завершает тест. Фиксируются финальные показатели, и в карточку товара возвращается исходное изображение. Вы можете просмотреть результаты тестирования и при необходимости создать новый тест.


Какие метрики считает A/B-тест?

Тестирование определяет для каждого изображения следующие показатели:

  • CTR;
  • просмотры;
  • клики;
  • добавления в корзину;
  • оформление заказов;
  • количество раундов.

Чтобы посмотреть результаты, откройте нужный тест в разделе «A/B-тестирование». Внутри вы увидите статистику по каждому изображению, показатели по раундам и итоговые метрики.


Какие требования к запуску А/B теста?

Компания рекламирует один товар. Если в кампанию включено несколько товаров, A/B-тест запустить не получится. Такие кампании не отображаются среди доступных вариантов.

Кампания уже запущена или находится на паузе. Создать A/B-тест для завершенной рекламной кампании нельзя.

Изображения должны соответствовать требованиям Wildberries:

  • форматы: JPG, PNG или WEBP;
  • минимальное разрешение: 700 × 900 px;
  • размер файла: до 32 МБ;
  • качество изображения — не ниже 65%.

Также изображения должны соответствовать правилам оформления карточек товаров Wildberries. Если файл не соответствует требованиям, маркетплейс может остановить рекламную кампанию, а вместе с ней и тестирование. Правила оформления WB


Какие параметры тестирования можно настроить?

Просмотры на одно фото — определяют, сколько показов должно набрать одно изображение, чтобы выйти из тестирования.
Например, вы указали 1500 просмотров. Когда одно из фото в сумме раундов наберет 1500 просмотров, система уберет его из тестирования. При этом тест не заканчивается, а продолжается, пока все изображения не наберут 1500 просмотров или вы не завершите его вручную.

Доступен выбор в пределах от 500 до 4000 просмотров. Задать меньшее или большее значение не получится.

Количество просмотров за один раунд — определяет, сколько показов может получить изображение в рамках одного раунда. Когда установленное значение набирается, фото меняется и начинается следующий раунд.
Например, вы установили значение 250. Когда фото наберёт это количество просмотров, раунд завершится, сервис сменит изображение и начнёт следующий раунд.

Доступен выбор в пределах от 50 до 450 просмотров.

Когда все фото покажутся по одному разу, сервис начнёт показывать изображения по второму кругу. Так будет продолжаться, пока все фото не наберут установленный лимит просмотров на одно фото.

Время на один раунд — устанавливает длительность показа одного изображения в минутах. Если указанное время истекло, фото меняется и начинается следующий раунд.

Доступен выбор в пределах от 30 до 60 минут.

Экран настройки параметров А/B тестирования.


Что такое раунд тестирования?

Раунд — это этап теста, в течение которого в карточке товара Wildberries показывается одно из тестируемых изображений. В это время система собирает статистику по этому изображению и записывает её в отчёт теста.

Раунд завершается, когда достигается заданное количество просмотров или истекает установленное время. После этого система переключает изображение и начинает следующий раунд. Благодаря раундам все изображения получают сопоставимые условия показа.


Почему А/B-тест прервался?

Возможна одна из двух причин.

Рекламная кампания остановлена. Как только система замечает, что рекламная кампания остановлена или завершена, она останавливает тестирование.
Чтобы возобновить A/B-тест, возобновите кампанию, затем откройте тестирование и нажмите «Обновить». Возобновить тест для завершенной кампании не получится.

A/B-тестирование не может достичь цели. Например, если у рекламной кампании слишком мало трафика и изображения не набирают необходимое количество показов более 24 часов подряд. В этом случае тест завершается автоматически. Это сделано для того, чтобы не держать тест бесконечно в активном статусе без реальных результатов.

Тест, завершенный автоматически из-за низкого трафика, возобновить нельзя.


Как приостановить A/B-тест вручную?

Откройте нужный тест и нажмите кнопку «Приостановить». Система остановит показ тестовых изображений, зафиксирует текущие показатели раунда и вернёт исходное изображение товара в рекламную кампанию.

Позже вы сможете возобновить тест, если кампания будет активной. При этом тестирование продолжится с того же раунда, на котором оно было остановлено.


Что будет с карточкой товара при остановке или завершении теста?

Система автоматически возвращает исходное изображение товара в рекламную кампанию.


Можно ли создать несколько A/B-тестов для одной рекламной кампании?

Да, можно. При этом одновременно может работать только один тест. Чтобы запустить второе тестирование, сначала остановите первое.


Как узнать, что A/B-тест остановился или завершился?

Когда тест приостанавливается или завершается, его статус меняется в разделе «A/B-тестирование».

Также система отправляет уведомление о ключевых событиях в «колокольчик». Благодаря этому вы сразу видите, что тест остановился, и можете принять решение: возобновить его или создать новый.


Можно ли изменить A/B-тест после запуска?

Да, вы можете убрать одно или несколько фото из A/B-теста. Для этого откройте нужное тестирование и нажмите на иконку мусорной корзины напротив фото, которое хотите удалить.

Изменить другие параметры тестирования после запуска не получится. Например, вы не сможете уменьшить время раунда. Для этого нужно создать новое тестирование с новыми параметрами.


Влияет ли A/B-тестирование на работу рекламной кампании?

A/B-тест не меняет настройки самой рекламной кампании — бюджет, ставки и стратегию показов. Он только поочередно меняет изображение товара в рамках кампании, чтобы собрать статистику по каждому варианту. После завершения теста исходное изображение автоматически возвращается.