Тестирование тем писем

С темы письма начинается воронка email-маркетинга. От нее зависит процент открытий писем и объем продаж как следствие. Сплит-тестирование темы можно провести 2 методами:


Как тестировать разные темы?

Выбор метода проведения эксперимента зависит от цели:

  • понять поведение подписчиков;
  • определить работающие формулировки для конкретной аудитории;
  • найти элементы, которые повышают процент открытия (например, персонализация, эмодзи и т.д.).


Первый метод: Эксперимент с несколькими темами в одном письме

1. В разделе Сообщения - Сообщения выбираем уже готовое письмо или создаём новое.

Создание сообщений в редакторе

2. В редакторе сообщений выбираем поле “Тема письма”.

Тестирование темы в письме

3. Вводим первую тему, которая будет нашей основной.

Создание темы письма

4. Для введения второго варианта нажмите “плюс” в конце строки с темой.

Добавление тем для А/В теста

В момент отправки система разделит получателей случайным образом на две, три или необходимое количество равных частей. 


Оценка результатов тестирования

1. Заходим во вкладку Отчёты - Email.

Просмотр отчета рассылок

2. Выбираем нужное письмо в общем списке.

Отчёт по рассылке

3. В отчетах рассылок результаты тестирования находятся во вкладке “Эксперимент”.

Пример результатов сплит-теста тем

В сводной таблице видны итоги по:

  • показателям открытия;

  • переходам;

  • CTR;

  • отпискам;

  • жалобам на СПАМ.

Подсчет результатов в системе проводится по специальным формулам и оценивается их статистическая достоверность. Если результаты достоверны, то в таблице отображается на сколько один вариант эффективней или хуже другого.

Чем больше группа контактов для тестирования, тем достоверней результат и можно говорить о внедрении результатов эксперимента на всю базу контактов.

Важно!

1) Количество контактов в отчёте может незначительно отличаться, так как некоторые контакты попадают в ошибки или чёрный список и в момент запуска тестирования они не доступны.

2) В Google Analytics будет собрана статистика по письму в рамках одной кампании без детализации на темы.

Если вам нужно определить сколько продаж принесла та или иная тема - тогда воспользуйтесь вторым способом тестирования - разделение на группы.


Второй метод: Тестирование с разделением на группы

Также этот метод А/В тестирования подойдет если необходимо провести эксперимент на определенной выборке подписчиков. Здесь размер каждого сегмента можно задать самостоятельно.

Для этого выполняем такие шаги:

1) Заходим в Контакты - Группы контактов.

Выбор группы контактов

2) Выбираем нужную группу. Для тестирования можно разделять как списки, так и условные группы.

Список групп контактов

3) Внутри группы выбираем функцию “Разбить группу”.

Кнопка разбития группы на сегменты

4) В окне “Разбитие группы” задаем количество групп и нужное процентное разделение:

Разбитие группы на части

После разбития в списке групп появятся новые сегменты:

Новые сегменты в списке групп

Важно!
Для такого типа тестирования создаем нужное количество писем с дублирующимся контентом, но разными темами. Названия сообщения прописываем разные, можно со специальными метками, чтобы легко просмотреть результат в Аналитиксе.

Подписи сообщений для идентификации в GA

5) Переходим к запуску рассылки:

Запуск рассылки

6) Выбираем для каждого письма соответствующую группу:

Запуск рассылки для отдельной группы


Определяем тему-победителя

1) Заходим во Вкладку Рассылки - Отчёты.

Простотр отчетов рассылок на разные группы

На странице отобразятся рассылки за указанный период и базовые показатели по рассылкам.

2) В общем списке сообщений выбираем нужное письмо. Его легко определить по названию сообщения. В данном примере было проведено тестирование темы с эмодзи и без.

Пример тестирования разных тем

3) При нажатии на название сообщения открывается страница с дополнительной детализацией. 


New_Arrivals_(pencil)

Детализация отчета по первой теме


New_Arrivals_(no_pencil)

Детализация отчета по второй теме

Такой вариант подходит не только для тестирования тем, а и предзаголовков, кнопок и т.д.
 

Нюансы в тестировании тем письма

Для корректности результата перед стартом эксперимента:

  • Определите гипотезу - предположение, которое вы хотите доказать или опровергнуть в ходе теста. Например, эмодзи в теме письма повышают open rate.

  • У каждого эксперимента должна быть цель. Например, определить стиль общения с подписчиками для повышения конверсии из читателя в постоянного покупателя.

  • Подзаголовок письма должен сочетаться с каждой из тестируемых тем.

  • “Бог в мелочах”, а это значит, что каждая деталь имеет значение. Любое слово, символ, буква могут повлиять на результаты.

  • Для достоверности результатов одного тестирования недостаточно. То, что работает на одну группу может не работать на другую или через месяц предпочтения клиентов могут измениться под влиянием внешней среды.

  • Чем меньше количество участников теста по отношению к общему числу базы рассылки, тем выше процент погрешность результатов.

Важно! Сплит-тестирование проводится по одному параметру. Тестирование нескольких элементов одном письме (например, и темы и хедера) нарушает чистоту эксперимента.

">