A/B тестирование

A/B тестирование — это функция версии Pro, которая сравнивает две темы письма для кампании на выборке вашей аудитории, а затем отправляет лучший вариант всем остальным. Это избавляет вас от необходимости угадывать, что написать в теме.

Как это работает

1. Создайте кампанию и включите A/B тестирование.
2. Установите тему А (основная тема кампании) и тему Б (альтернативная тема для теста).
3. Выберите разделение: какой процент аудитории получит вариант А, а какой процент получит вариант Б. Оставшиеся контакты задерживаются в качестве пула победителя.
4. Выберите метрику победы: процент открытий или процент кликов.
5. Установите период ожидания (в часах) до определения победителя.
6. Выберите режим определения победителя: автоматически (PrimoCRM отправляет победителя в отложенный пул за вас) или вручную (вы сами просматриваете результаты и выбираете победителя).

PrimoCRM отправляет вариант А и вариант Б соответствующим частям аудитории, ждет окончания периода оценки, а затем либо автоматически отправляет победившую тему в отложенный пул, либо ждет вашего выбора, в зависимости от режима определения победителя.

Пример из практики

• Аудитория: 10 000 контактов.
• Разделение: 10 процентов для А и 10 процентов для Б, то есть по 1000 контактов на каждый вариант. Остальные 8000 составляют пул победителя.
• Метрика: процент открытий. Ожидание: 4 часа. Режим победителя: автоматически.

Спустя 4 часа PrimoCRM сравнивает процент открытий для обеих тем, а затем отправляет победившую тему оставшимся 8000 контактам. Вы получаете лучшую тему для большей части своего списка без необходимости принимать решение вручную.

Советы

• Изменяйте только тему письма между вариантами А и Б, чтобы точно знать, что на показатели повлияла именно она.
• Делайте каждую выборку достаточно большой, чтобы результат был значимым. Очень маленькие группы дают неточные результаты.
• Выделяйте достаточно времени на период ожидания, так как открытия поступают еще несколько часов после отправки.
• Используйте процент открытий в качестве метрики для тестирования тем писем, так как это наиболее прямой показатель того, на что влияет тема.
• Используйте полученные знания в своей следующей кампании и шаблонах.

Оценка победителя работает на том же фоновом движке, который регулирует скорость отправки, поэтому она происходит надежно без необходимости держать вкладку открытой. Обратитесь к разделу Отчеты, чтобы просмотреть результаты позже.