A/B-тест MailerLite на всей базе: когда полезен режим без автоматического победителя
Как использовать тест всей аудитории в MailerLite и выбрать критерий сравнения писем магазина, не смешивая открытия, клики и продажи.
Содержание статьи
A/B-кампания магазина может решать две разные задачи: выбрать письмо для оставшейся аудитории или получить знание для следующего запуска. В MailerLite доступен режим Run A/B test on the entire list: версии отправляются равным частям выбранного списка, а автоматический победитель для досылки не назначается. Это полезно, когда важнее честно сравнить подходы, чем быстро распространить один вариант.
Выберите режим под задачу кампании
Обычный сценарий MailerLite сравнивает версии на части аудитории и отправляет победителя остальным. Критерием могут быть открытия или клики по окончании заданного периода. Режим всей базы не оставляет такую резервную группу. Результаты обеих версий затем используются для планирования следующих писем.
Если акция длится ограниченное время, заранее определите, сколько времени реально останется на покупку после получения письма. Но не выбирайте победителя только ради завершения теста: несколько случайных реакций ещё не дают устойчивого основания менять всю коммуникацию магазина.
Проверяйте одну содержательную гипотезу
Например, вы хотите понять, лучше ли работает подборка по сценарию использования, чем перечень скидок. Сохраните одинаковыми ассортимент, цену и срок действия предложения. Если одновременно изменить отправителя, заголовок, товары и условия, результат не объяснит, какой именно фактор повлиял на покупателя.
Сначала согласуйте аудиторию. Исключённые или неподходящие контакты не должны попасть в тест из-за копирования прежней кампании. Перед запуском проверьте группы и динамические сегменты, а также наличие выбранных товаров на протяжении наблюдения.
Разведите критерий интерфейса и результат бизнеса
Открытие показывает зарегистрированное взаимодействие с письмом, клик — переход по ссылке. Ни то ни другое автоматически не означает оплаченный заказ. Если задача исследования — продажи, отдельно сопоставьте заказы и доступные данные атрибуции, сохранив одинаковые правила для обеих версий.
Проверьте посадочные страницы и корректность персональных блоков. Если часть базы видит другой ассортимент из-за заполнения полей, это нужно учитывать при интерпретации. Проверка пользовательских полей помогает отделить ошибку данных от реакции на творческую идею.
Сохраните вывод, который можно повторить
До отправки запишите гипотезу, объём выбранной аудитории, период оценки и главный показатель. После завершения сохраните оба письма и фактические результаты. Укажите, были ли сбои доставки, изменения цены или отсутствие товара: эти события способны объяснить разницу лучше, чем оформление письма.
Не переносите победу одного варианта на весь ассортимент навсегда. Подборка, полезная для сложного выбора, может не подойти для простого расходного товара. Практический итог теста — ограниченное наблюдение о конкретной аудитории и предложении. Следующую кампанию планируйте с учётом этого знания, а не с обещанием гарантированного роста от любой рассылки по найденному шаблону.
Сохраните отдельный снимок результатов в момент окончания выбранного периода и более поздний отчёт. MailerLite продолжает учитывать реакции, поэтому поздние открытия и клики способны изменить видимые доли. Для режима отправки всей базе это последующий анализ двух равных групп: оставшейся аудитории, которой сервис автоматически отправит победителя, уже нет.
Материал отражает сведения на указанную дату. Правила и условия работы площадок могут измениться. Редакционные принципы