Тестирование тем писем

С темы письма начинается воронка email-маркетинга. От нее зависит процент открытий писем и объем продаж как следствие. Сплит-тестирование темы можно провести 2 методами:

• В пределах письма
• В рамках нескольких писем.

Как тестировать разные темы?

Выбор метода проведения эксперимента зависит от цели:

• понять поведение подписчиков;
• определить работающие формулировки для конкретной аудитории;
• найти элементы, которые повышают процент открытия (например, персонализация, эмодзи и т.д.).

Первый метод: Эксперимент с несколькими темами в одном письме

1. В разделе Сообщения → Сообщения выбираем уже готовое письмо или создаём новое.

2. В редакторе сообщений выбираем поле «Тема письма».

3. Вводим первую тему, которая будет нашей основной.

4. Для введения второго варианта нажмите «плюс» в конце строки с темой.

В момент отправки система разделит получателей случайным образом на две, три или необходимое количество равных частей. 

Оценка результатов тестирования

1. Заходим во вкладку Отчёты → Email.

2. Выбираем нужное письмо в общем списке.

3. В отчетах рассылок результаты тестирования находятся во вкладке «Эксперимент».

В сводной таблице видны итоги по:

• показателям открытия;
• переходам;
• CTR;
• отпискам;
• жалобам на СПАМ.

Подсчет результатов в системе проводится по специальным формулам и оценивается их статистическая достоверность. Если результаты достоверны, то в таблице отображается на сколько один вариант эффективней или хуже другого.

Чем больше группа контактов для тестирования, тем достоверней результат и можно говорить о внедрении результатов эксперимента на всю базу контактов.

Второй метод: Тестирование с разделением на группы

Также этот метод А/В тестирования подойдет если необходимо провести эксперимент на определенной выборке подписчиков. Здесь размер каждого сегмента можно задать самостоятельно.

Для этого выполняем такие шаги:

1) Заходим в Контакты - Группы контактов.

2) Выбираем нужную группу. Для тестирования можно разделять как списки, так и условные группы.

3) Внутри группы выбираем функцию «Разбить группу».

4) В окне «Разбитие группы» задаем количество групп и нужное процентное разделение:

После разбития в списке групп появятся новые сегменты:

5) Переходим к запуску рассылки:

6) Выбираем для каждого письма соответствующую группу:

Определяем тему-победителя

1) Заходим во вкладку Рассылки → Отчёты.

На странице отобразятся рассылки за указанный период и базовые показатели по рассылкам.

2) В общем списке сообщений выбираем нужное письмо. Его легко определить по названию сообщения. В данном примере было проведено тестирование темы с эмодзи и без.

3) При нажатии на название сообщения открывается страница с дополнительной детализацией. 

New_Arrivals_(pencil)

New_Arrivals_(no_pencil)

Такой вариант подходит не только для тестирования тем, а и предзаголовков, кнопок и т.д.

Нюансы в тестировании тем письма

Для корректности результата перед стартом эксперимента:

• Определите гипотезу - предположение, которое вы хотите доказать или опровергнуть в ходе теста. Например, эмодзи в теме письма повышают open rate.
• У каждого эксперимента должна быть цель. Например, определить стиль общения с подписчиками для повышения конверсии из читателя в постоянного покупателя.
• Подзаголовок письма должен сочетаться с каждой из тестируемых тем.
• “Бог в мелочах”, а это значит, что каждая деталь имеет значение. Любое слово, символ, буква могут повлиять на результаты.
• Для достоверности результатов одного тестирования недостаточно. То, что работает на одну группу может не работать на другую или через месяц предпочтения клиентов могут измениться под влиянием внешней среды.
• Чем меньше количество участников теста по отношению к общему числу базы рассылки, тем выше процент погрешность результатов.