A/B-тестирование виджетов

A/B-тестирование – это метод маркетингового исследования, в рамках которого две (или более) версии того же элемента, такого как виджет или рекомендательный блок, сравниваются. Целью A/B-тестирования является определение того, какая из версий более эффективно достигает заданных целей.

В eSputnik A/B тестирование доступно для таких типов виджетов::

• Формы подписки

• Інформери

• Кнопки вызова

• Ограничение возраста

A/B-тестирование нельзя запускать для виджетов, которые:

• Содержат ошибки

• Имеют несохраненные изменения

• Участвуют в другом A/B-тестировании

Чтобы открыть экран A/B-тестов, перейдите в раздел “Сайт” → “Виджеты” и выберите “A/B-тесты” на левой боковой панели.

Управление А/В-тестами

Чтобы создать новый тест, нажмите кнопку “Новый тест”.

Для запуска A/B-теста, вам нужно по крайней мере 2 виджета. Если их нет, нажатие кнопки “Новый виджет” открывает меню создания виджета.

Выберите тип виджета и следуйте инструкциям по настройкам.

После создания виджетов можно переходить к тестированию.

В eSputnik можно протестировать:

• 2 виджета

• 2 виджета, когда один из них привязан к кнопке вызова

• 2 пары виджетов и кнопок вызова

На странице A/B тестов отображен список активных и завершенных тестов.

Столбик “Уверенность” показывает вероятность результатов теста в процентах. Результаты теста надежны, если превышают 90%. В этом случае значение уверенности отображается зеленым цветом.

Остановка теста

1. Выберите тест из списка со статусом “В процессе”, разверните меню и выберите один из вариантов остановки:

• Остановить. Остановить тест и сохранить виджеты опубликованными

• Остановить и отменить публикацию обоих. Остановить проверку и отменить публикацию обоих виджетов, когда уверенность составляет 0%.

• Остановить и отменить публикацию худшего. Остановить тест и отменить публикацию виджета с наихудшей производительностью, когда уверенность меньше 90%.

• Остановить и отменить публикацию проигравшего. Остановить тест и отменить публикацию виджета с наихудшей производительностью, когда уверенность превышает 90 %.

2. Подтвердите остановку теста.

Остановленные тесты меняют свой статус на “Завершенный”.

Удаление теста

1. Выберите тест из списка, нажмите значок “три точки” и нажмите “Удалить”. 

2. Подтвердите удаление теста.

Тест навсегда удаляется из списка A/B-тестов. Виджеты, участвовавшие в удаленном тесте, остаются в аккаунте.

Просмотр результатов теста

Нажмите название теста в столбце “Имя”, чтобы открыть страницу статистики.

Переключайтесь между вкладками “Все”, “Десктоп” и “Мобильный”, чтобы просмотреть соответствующие детали тестирования.

Для предварительного просмотра виджета наведите на него курсор в столбце “Виджеты”. Виджет отображается в правом нижнем углу экрана.

Чтобы перейти к параметрам виджета, нажмите на него.

Для просмотра виджета и правил его вызова в новом окне нажмите значок предварительного просмотра в правой части строки виджета.

В  окне предварительного просмотра можно переключаться между предварительным просмотром виджета на десктопном или мобильном устройстве, нажимая соответствующий значок.

Чтобы перейти к параметрам виджета, нажмите кнопку “Открыть”.

Создание A/B-тестов для двух вариантов виджета

Запустите A/B-тест, чтобы сравнить производительность 2 виджетов.

1. В окне A/B-тестов нажмите кнопку “Новый тест”.

2. В окне “Новый тест” введите имя теста (обязательно) и описание теста (опционально).

3. Нажмите “Выбрать виджет A” и выберите виджет из списка.

Для поиска виджета в общем списке используйте строку поиска по одному из параметров:

• Название виджета

• ID виджета

4. Нажмите “Выбрать виджет B” и выберите его из списка.

5. Введите значение в поле “Распределение трафика” для одного из виджетов.

6. Нажмите “Запустить тест”.

Если виджеты не опубликованы, откроется диалоговое окно “Начать тестирование”. Выберите “Опубликовать оба виджета и начать тест” и нажмите “Запустить тест”.

Тест отобразится в общем списке A/B тестов со статусом “В процессе”.

Запуск A/B-теста для двух виджетов, один из которых привязан к кнопке вызова

Если для одного из ваших виджетов в настройках вызова включена опция “По клику на кнопку вызова”, вы можете запустить A/B-тест для 2 виджетов, подключенных к кнопке вызова.

Когда посетитель страницы нажимает кнопку вызова во время тестирования, она показывает либо виджет A, либо виджет B, в зависимости от используемых значений распределения трафика.

1. На левой боковой панели выберите “A/B тесты” и нажмите кнопку ”Новый тест”.

2. В окне “Новый тест” введите имя теста (обязательно) и описание теста (опционально).

3. Нажмите “Выбрать виджет A” и выберите виджет из списка. Для этого виджета должен быть включен параметр вызова “По кликуна кнопку вызова”.

4. Нажмите “Выбрать виджет В” и выберите виджет из списка. Для этого виджета  не должен быть включен параметр вызова “По кликуна кнопку вызова”.

5. Введите значение в поле “Распределение трафика” для одного из виджетов.

6. Нажмите “Запустить тест”.

Запуск A/B-теста двух виджетов, привязанных к двум кнопкам вызова

Активируйте параметр виджета  “По клику на кнопку вызова”, чтобы запустить А/В-тест для 2 виджетов, привязанных к 2 разным кнопкам вызова.

Посетитель страницы увидит одну из кнопок вызова и связанный с ней виджет в зависимости от значений распределения трафика.

В этом случае автоматически запускаются 2 разных теста:

• Тест для кнопок вызова.

• Тест для виджетов.

Статистика собирается отдельно для каждого теста.

1. На левой боковой панели выберите “A/B тесты” и нажмите кнопку “Новый тест”.

2. В окне “Новый тест” введите имя теста (обязательно) и описание теста (опционально).

3. Нажмите “Выбрать виджет A” и выберите виджет из списка. Для этого виджета должен быть включен параметр вызова “По кликуна кнопку вызова”.

4. Нажмите “Выбрать виджет В” и выберите виджет из списка. Для этого виджета должен быть включен параметр вызова “По кликуна кнопку вызова”.

5. Введите значение в поле “Распределение трафика” для одного из виджетов.

6. Нажмите “Запустить тест”.