Как тестировать SMS, Viber и email малому бизнесу

A/B-тестирование рассылок помогает понять, какой текст, момент отправки и призыв к действию лучше работают для конкретной аудитории. Для этого малому бизнесу не нужен сложный аналитический проект: достаточно выбрать одну гипотезу, разделить похожих клиентов на две группы, отправить варианты и сравнить одинаковые показатели. В статье разберём практическую схему для SMS, Viber и email, примеры гипотез и ошибки, из-за которых результаты теста нельзя использовать.

Что именно проверять в SMS, Viber и email?

Главное правило теста — за один запуск менять один существенный элемент. Если в варианте A другой текст, время отправки и ссылка, вы не поймёте, что именно повлияло на результат. Для первого теста лучше выбрать один вопрос: например, сработает ли конкретный призыв или принесёт ли вечерняя отправка больше переходов.

Канал тоже задаёт формат теста. SMS рассчитано на короткое сообщение, поэтому там проверяют ясность первой строки, длину и понятность действия. В SMS часто ориентируются на ограничение до 160 символов, указанное в материалах о сравнении SMS и email (источник: «Сравнение SMS и email-рассылок: когда выбирать каждый канал»). Viber позволяет добавить изображение, кнопку и более подробное объяснение. Email даёт место для темы, прехедера, текста, фотографий и нескольких ссылок.

Сначала определите действие, ради которого отправляется сообщение. Для интернет-магазина это заказ или переход к товару, для салона — запись, для сервиса — подтверждение визита. Если рассылка сообщает о готовности заказа, измеряйте переход к инструкции или факт получения. Если она напоминает о повторной покупке, заранее зафиксируйте период, в котором клиент должен оформить новый заказ.

Примеры рабочих гипотез можно собрать в таблицу:

• короткое SMS с конкретным сроком даст больше переходов, чем сообщение без срока;
• кнопка «Выбрать время» принесёт больше записей, чем общий призыв «Подробнее»;
• персональная тема email с названием категории товара увеличит долю открытий;
• Viber с одним предложением и одной кнопкой даст больше целевых переходов, чем сообщение с несколькими вариантами;
• напоминание за день до события сработает лучше, чем сообщение утром в день записи.

Как разделить базу и провести честный тест?

В тест попадают клиенты, для которых подходит одно и то же предложение. Нельзя сравнивать новых подписчиков с людьми, которые уже покупали несколько раз, если цель — оценить текст для всей группы. Разделите базу на похожие части: по истории покупок, интересу к категории, типу клиента или давности последнего действия.

Например, магазин выбирает клиентов, которые покупали бытовые товары в последние месяцы. Половина получает SMS с призывом «Выбрать товар», вторая половина — SMS с призывом «Получить скидку». Состав сегментов, предложение, ссылка и срок действия остаются одинаковыми. Меняется только формулировка призыва.

Для небольших баз есть практическое ограничение: слишком маленькая группа даёт нестабильный результат. Если разница между вариантами составила несколько переходов, её нельзя сразу считать доказательством. Запишите результат как наблюдение и повторите проверку на следующей похожей кампании. Так решение опирается на несколько запусков, а не на случайный всплеск.

Тестируйте группы в близкие периоды. Если вариант A отправлен во вторник утром, а вариант B в субботу вечером, вместе с текстом меняется поведение аудитории. При проверке времени отправки оставьте один и тот же текст, сегмент и предложение. Сравнивайте варианты после одинакового интервала, например через сутки для короткой акции или через несколько дней для повторной покупки.

В CRM или сервисе рассылок полезно дать вариантам понятные названия: repeat_sms_button_1 и repeat_sms_button_2. Запишите дату, сегмент, канал, текст, ссылку и целевое действие. Если коммуникации связаны с магазином или CRM, автоматизация снижает риск ручной подмены группы и помогает передать результат в общую историю клиента. Подходы к такой связке разобраны в материале автоматизация SMS и Viber через API без разработчика.

Какие показатели сравнивать по каждому каналу?

Открытие или доставка показывают, дошло ли сообщение и заметил ли его клиент. Для бизнеса важнее следующий шаг: переход, ответ, запись, заказ или другое действие, которое связано с задачей рассылки. Один показатель без контекста легко вводит в заблуждение.

Если цель — вернуть клиента к покупке, основной показатель должен отражать завершённую покупку в заданный срок. Переход по ссылке полезен как промежуточная метрика, но он не заменяет заказ. Если цель — запись, учитывайте созданную запись, а не только открытие сообщения.

Сравнивайте не только количество действий, но и долю действий от числа доставленных сообщений. Вариант, который отправили большей группе, почти всегда соберёт больше абсолютных кликов. Для сопоставления нужны одинаковые знаменатели. Отдельно смотрите на отписки, жалобы и ответы клиентов, если платформа передаёт такие данные.

Ссылки в разных вариантах должны вести на страницы, где можно отличить один тест от другого. Для этого используют отдельные метки кампании или разные короткие ссылки. В тексте сообщения достаточно оставить одно целевое действие. Если email содержит пять равнозначных кнопок, клиентский путь становится труднее связать с конкретной гипотезой.

Как выбирать победивший вариант?

Победителем становится вариант, который лучше выполняет заранее выбранную цель при сопоставимых условиях. Если SMS B получило больше переходов, но принесло меньше заказов, результат зависит от задачи. Для продаж выбирайте вариант по заказам и их доле, для записи — по подтверждённым визитам, для информирования — по переходам к нужной инструкции.

После теста оформите короткий отчёт:

1. какую гипотезу проверяли;
2. какие клиенты попали в каждую группу;
3. какой текст и время получили группы;
4. сколько сообщений доставлено;
5. сколько клиентов выполнили целевое действие;
6. какой вариант стоит повторно проверить или использовать в следующей кампании.

Результат нельзя переносить на все рассылки автоматически. Текст, который сработал для клиентов с недавней покупкой, может оказаться слабым для неактивной базы. Отдельно проверяйте сервисные сообщения, промо и напоминания. Для выбора формата уведомления пригодится разбор задач каналов в статье какие сообщения отправлять клиенту по SMS, Viber или email.

Какие ошибки чаще всего портят A/B-тест?

• Меняют несколько элементов сразу. Новый текст, картинка и время отправки не позволяют определить причину результата.
• Сравнивают разные сегменты. Постоянные покупатели и новые контакты реагируют на предложение по-разному.
• Оценивают только открытия. Открытое письмо или доставленное SMS ещё не означают заказ или запись.
• Используют разные сроки. Результат варианта, который наблюдали один день, нельзя напрямую сравнить с вариантом, который отслеживали неделю.
• Отправляют повторное сообщение слишком быстро. Клиент может увидеть оба варианта и испортить чистоту эксперимента.
• Не сохраняют историю. Без текста, даты и сегмента невозможно понять, почему прошлый вариант оказался сильнее.

Для малого бизнеса разумно начать с одной цепочки и одного вопроса. Например, интернет-магазин проверяет два призыва в SMS после брошенной корзины, затем сравнивает варианты email для тех, кто не вернулся. В Telemedia Media можно собрать коммуникацию из SMS, Viber и email и настроить рассылки под разные этапы клиентского пути, сохранив простую схему: гипотеза, две версии, один основной показатель.