Заранее выберите одно различие и одинаковое определение результата. Маленький тест может помочь обнаружить проблему и сформировать следующую гипотезу. Он не обязан дать убедительного победителя, особенно если визитов мало и условия различаются.
Определите, что сравниваете
Два текста, два состава услуги и два района — разные сравнения. Если одновременно меняются все три, результат нельзя уверенно приписать формулировке.
Зафиксируйте услугу, место, доступное время, материал, период и состав затрат. Проверьте текущие возможности выбранного инструмента, не предполагая автоматическое равное распределение аудитории у любой площадки.
| Условие | Почему важно |
|---|---|
| Одинаковое событие | Диалог не сравнивается с визитом |
| Сопоставимое окно | У людей должно быть время завершить путь |
| Понятные расходы | Один вариант не должен скрывать подготовку |
| Доступная услуга | Оба предложения должны быть выполнимы |
| Наблюдаемые изменения | Погода, расписание и источник могут влиять |
| Ограничение теста | Расход не продолжается автоматически |
Общий допустимый расход определяют по реальным возможностям проекта. Универсальная сумма и гарантированный объём данных здесь не задаются.
Проверьте путь до запуска
Сверьте достоверность условий, изображения, ссылку и ответ на обращение. Не запускайте один вариант с рабочей записью, а другой с закрытым календарём, чтобы затем сравнить только заголовки.
Рекламные правила и права на материалы проверяются отдельно. Нельзя добирать показы ложным обещанием или обходом ограничений.
Считайте ограниченный результат
Учебный пример: по каждому варианту потрачено 1 000 ₽. А дал пять подходящих обращений и два состоявшихся визита; Б — десять и один. Цена подходящего обращения — соответственно 200 и 100 ₽, расходы на визит — 500 и 1 000 ₽.
Это арифметика условного примера, не рыночная норма и не статистическое доказательство превосходства А. Число событий мало, остальные расходы и доходы неизвестны. Смена показателя меняет впечатление, поэтому его выбирают заранее.
Не додумывайте неизвестное
Несколько сообщений одного человека не являются новыми обращениями. Неизвестный источник не назначается понравившемуся варианту. Будущая запись пока не считается визитом.
Если результаты неразличимы в пределах доступного наблюдения, так и зафиксируйте. Остановка по лимиту допустима без объявления победителя.
Сохраните следующий вопрос
После теста выберите наблюдаемый разрыв: неподходящий запрос, неудобное время или неисправная ссылка. Проверьте конкретное изменение, сохраняя историю. Не расширяйте бюджет автоматически только потому, что небольшая сумма уже потрачена, и не называйте любой рост сообщений доказанной прибылью.
Связанный разбор: Когда останавливать рекламный тест, а когда рано делать вывод.