Клиенты для бизнеса
Стратегия и бюджет

A/B-тесты в рекламе: как проводить и когда доверять результатам

A/B-тест сравнивает два варианта и показывает, какой работает лучше. Но без правил он легко приводит к ложным выводам. Разберём, что тестировать, как собрать нужный объём данных и когда результат можно считать надёжным.

· 5 мин чтения

Что такое A/B-тест в рекламе

Вы показываете аудитории два варианта, отличающиеся одним элементом, например заголовком, и сравниваете показатели. Вариант с лучшим результатом выигрывает и получает основной бюджет. Тест отвечает на конкретный вопрос: какой заголовок даёт больше заявок, какая картинка цепляет сильнее, какая страница убеждает лучше.

Ключевое условие — менять только один элемент за раз и держать остальные условия одинаковыми: аудиторию, время, бюджет, площадку.

Что тестировать в первую очередь

ЭлементПримеры вариантовВлияние
ОфферСкидка или бесплатная консультацияВысокое
ЗаголовокВопрос или утверждение, выгода или проблемаВысокое
Изображение или видеоПродукт, люди, результатСреднее-высокое
Призыв к действию«Записаться», «Узнать цену»Среднее
Посадочная страницаДлинная или короткая, с ценой или безВысокое
АудиторияИнтересы, возраст, гео, ключевые фразыВысокое

Начинайте с того, что сильнее всего влияет на результат: оффер и аудитория. Менять оттенок кнопки не стоит, пока не отработаны крупные рычаги.

Как сформулировать гипотезу

Хорошая гипотеза записывается так: «Если мы заменим заголовок с общего на конкретный с указанием срока, то CTR вырастет, потому что клиенту будет понятнее выгода». В ней есть изменение, ожидаемый результат и причина. Без причины тест превращается в игру в рулетку, и даже выигрыш ничему вас не учит.

Определите метрику заранее. Для проверки объявления это CTR и цена клика, для оффера и страницы — заявки и цена заявки, а в конечном итоге оплаты.

Сколько данных нужно

Главная ошибка — останавливать тест после нескольких кликов. Малая выборка даёт случайные результаты. Вот иллюстрация: если вариант А получил 3 заявки, а вариант Б — 5, разница может быть чистой случайностью. Ориентир для старта — не менее 20–30 целевых событий на вариант, а для сравнения CTR — не менее нескольких сотен кликов на вариант. Чем меньше разница между вариантами, тем больше данных нужно, чтобы её подтвердить.

Тест должен идти не менее недели, чтобы захватить разные дни недели, и не должен совпадать с необычными событиями: акциями, праздниками, сбоями сайта.

Как провести тест по шагам

  1. Выберите одну гипотезу и один элемент.
  2. Подготовьте варианты А и Б, отличающиеся только этим элементом.
  3. Запустите их одновременно с равными условиями и бюджетами.
  4. Не вмешивайтесь в течение теста, не меняйте ставки и тексты.
  5. Дождитесь достаточного объёма данных.
  6. Сравните результаты по заранее выбранной метрике.
  7. Внедрите победителя и запишите вывод.

Многие площадки имеют встроенные инструменты тестирования, но принцип одинаков везде. Бюджет на тесты закладывайте заранее: о размере — в статье про тестовый бюджет.

Как читать результаты

Смотрите на разницу и на то, насколько она устойчива: повторяется ли преимущество по дням. Если в одни дни выигрывает А, в другие Б, значит, разницы, скорее всего, нет. Проверьте и качество: вариант с высоким CTR может привлекать любопытных, а не покупателей. Всегда сверяйте с нижними уровнями воронки: заявками, оплатами, ценой клиента.

Не отвергайте результат «ничья»: он тоже вывод. Он значит, что этот элемент не главный рычаг, и тестировать надо другие.

Тесты страниц и воронки

Для страниц удобнее всего разделять трафик между двумя адресами. Так проверяют длину, порядок блоков, форму заявки, цену. Следите за тем, чтобы трафик на обе страницы поступал из одного источника и в одно время. Если тестируете страницу, не меняйте одновременно объявления. После выбора победителя можно переходить к следующему элементу. В итоге цепочка небольших улучшений даёт заметный рост конверсии, а значит, и снижение цены клиента.

Типичные ошибки

  • Меняют сразу несколько элементов и не знают, что сработало.
  • Останавливают тест слишком рано.
  • Сравнивают варианты в разное время или с разными бюджетами.
  • Оценивают только CTR и забывают про заявки и оплаты.
  • Не записывают выводы, повторяя одни и те же тесты.
  • Тестируют мелочи вместо оффера и аудитории.

Пример теста объявлений

Допустим, вы тестируете два заголовка для поискового объявления клиники: «Лечение зубов без боли» и «Запись на приём на сегодня». Объявления запускаются в одной кампании с одинаковыми условиями. Через две недели у первого 420 кликов и 11 заявок, у второго 400 кликов и 19 заявок. Разница в числе заявок заметна, конверсия выше у второго варианта. Но прежде чем делать вывод, проверьте, что в оба варианта попали одинаковые запросы, и сравните оплаты. Если вариант с большим числом заявок приводит и больше записей, он побеждает. Пример условный.

Постоянная культура тестирования

Одиночные тесты полезны, но настоящий эффект даёт регулярная практика. Ведите журнал: гипотеза, дата, варианты, результат, вывод, действие. Планируйте один-два теста на каждый месяц рекламы, начиная с оффера и аудитории. Победители закрепляются, проигравшие записываются, чтобы не повторять попыток. Через полгода у вас накопится набор проверенных правил для вашего бизнеса, которые невозможно получить из чужих статей. Это и есть конкурентное преимущество рекламы, управляемой данными.

Итоговые рекомендации

Тестируйте по плану: гипотеза, один элемент, равные условия, достаточный объём данных, проверка по заявкам и оплатам, запись вывода. Не бойтесь отрицательных результатов, они экономят деньги и время. Начинайте с оффера и аудитории, затем переходите к страницам и деталям объявлений. Даже один хорошо проведённый тест в месяц за год даёт двенадцать проверенных решений, которых нет у конкурентов, действующих наугад.

Вопросы и ответы

Сколько вариантов тестировать одновременно?

Два-три. Чем больше вариантов, тем больше нужно бюджета и данных для вывода.

Сколько времени должен идти тест?

Не менее недели, чтобы учесть разные дни недели, и до набора достаточного количества событий.

Что делать, если разницы между вариантами нет?

Это тоже результат: элемент не определяет успех. Переходите к другому рычагу: оффер, аудитория, страница.

Можно ли тестировать на малом бюджете?

Можно, но тестируйте один элемент и по более частым событиям, например по кликам и CTR, понимая, что выводы менее надёжны.