Контроль гипотез

Каждое изменение в рекламе — с проверенным итогом

Агент находит проблему и предлагает решение, вы подтверждаете, а Performator запоминает, как было, и через 3, 7, 14 и 30 дней показывает, что стало на самом деле. Без догадок «вроде стало лучше».

7 дней тарифа «Базовый» · Без карты · Изменения — только после подтверждения

Как проверяется гипотеза в рекламе

От находки агента до измеренного результата — на примере кампании в сетях Яндекса, которая тратила бюджет без заявок.

Рабочий цикл: от находки до результата

Один и тот же порядок для каждой правки — предложил её агент или вы сами попросили.

  1. 01 · Находка

    Агент находит проблему

    Сверяет все кампании кабинета и замечает, где бюджет уходит без результата, — даже если в общей сумме это незаметно.

    Требует внимания Расход есть, заявок нет

    РСЯ · курсы · август
    12 600 ₽ при 0 заявках — 15% бюджета кабинета

  2. 02 · Причина

    Показывает исходные данные и причину

    Вывод опирается на цифры кабинета: период, источник, разбивка. Видно, на чём основано предположение, а не только само предположение.

    Где показывалась реклама · августИсточник: Яндекс Директ

    Предполагаемая причина: показы в мобильных приложениях дают клики, но не дают заявок.

  3. 03 · Предложение

    Предлагает изменение и объясняет эффект

    Что поменяется в кабинете и чего ждать: как изменятся расход, заявки и цена заявки. Изменение касается только этой кампании.

    Яндекс ДиректСтатус кампанииГотово к подтверждению

    Остановить расход без заявок в сетях

    Онлайн-школаРСЯ · курсы (70398214)
    Статус
    Кампания
    АктивнаОстановлена

    Ожидаем: расход кабинета −12 600 ₽ в месяц, заявки без изменений, цена заявки 2 000 → около 1 700 ₽.

  4. 04 · Подтверждение

    Решение — за вами

    Без вашего «Применить» ничего не меняется. Не согласны со значением — поправьте его прямо в карточке. Перед записью Performator заново читает кабинет: если настройки успели измениться, устаревшее предложение не пройдёт.

    Яндекс ДиректСтавкиГотово к подтверждению

    Снизить ставку в поиске, пока сети на паузе

    Онлайн-школаПоиск · курсы (70398190)
    Ставки
    Корректировка «мобильные»
    0%−10%
    Правка сохраненаПроверка на свежих данных кабинета пройдена — можно применять.
    ОтменитьСохранить
    Кабинет перечитан — настройки не менялись
    Затронута только кампания «Поиск · курсы»
  5. 05 · До и после

    Фиксирует состояние до и после

    Настройки и показатели на момент изменения сохраняются в истории: кто подтвердил, когда, что было и что стало. С этим снимком и будет сравнение.

    Запись в истории · 1 сентября, 12:04Снимок сохранён
    Статус кампанииАктивна → Пауза
    Расход кабинета, 7 дней19 600 ₽
    Заявки, 7 дней10
    Цена заявки1 960 ₽
  6. 06 · Замер

    Через 3, 7, 14 и 30 дней — фактический результат

    Сравнение «до» и «после» на окнах одинаковой длины. Рядом — хватает ли данных для вывода и что ещё могло повлиять: сезон, другие правки, пропуски показов.

    Цена заявки по кабинетуЭффект подтверждён
    3 дня1 960 ₽1 790 ₽−8,7%4 заявки — рано судить
    7 дней1 960 ₽1 666 ₽−15,0%10 заявок — предварительно
    14 дней1 960 ₽1 587 ₽−19,0%21 заявка
    30 дней1 960 ₽1 550 ₽−20,9%46 заявок — достаточно

    Других изменений в кампании не было. Кампании, которые не трогали, за то же время почти не изменились.

Как понять, что изменение сработало

Одна цифра «стало на 10% лучше» ничего не доказывает. Performator показывает диапазон, в котором почти наверняка лежит настоящий эффект, и выносит вердикт только когда данных хватает.

  • Сравниваем с кампаниями того же кабинета, которые не меняли, — так сезон и рынок не выдаются за эффект
  • Меньше 10 заявок до или после — вывод не делаем
  • В кампании меняли что-то ещё — эффект не приписываем одной правке
  • Поменяли цели конверсий — «до» и «после» несравнимы, так и пишем
Изменение цены заявки−50%0+50%
Пауза «РСЯ · курсы»Сработало
Ставка на мобильных −20%Без заметного эффекта
Новые минус-фразыНужно больше данных
Расширение географииНе сработало

Полоса — диапазон эффекта, точка — наиболее вероятное значение. Левее нуля — заявка подешевела.

История всех изменений и гипотез

Через полгода не придётся вспоминать, зачем отключали площадки и помогло ли это. Всё в одной ленте.

Что меняли и что получили

Каждое подтверждённое изменение с «было → стало», автором решения и итогом через 3, 7, 14 и 30 дней.

Что решили не делать

Отклонённые предложения сохраняются с причиной. Агент видит их, когда готовит новые, — решение не потеряется.

Правки мимо Performator

Изменения, сделанные в самом кабинете, тоже попадают в историю — и честно учитываются, когда мешают замеру.

Вопросы о контроле гипотез

Поможем разобраться с вашим сценарием.

Написать команде
Что такое гипотеза в рекламе?

Предположение, которое можно проверить: «если остановить показы в мобильных приложениях, цена заявки снизится, а заявок не станет меньше». Гипотеза становится знанием, только когда результат измерен на данных.

Почему замер через 3, 7, 14 и 30 дней?

Через 3 дня видно, не сломалось ли что-то. Через неделю — первая реакция, но данных обычно мало. Через 14 и 30 дней заявок больше, и вывод надёжнее. Окна одинаковой длины до и после убирают перекос из-за дней недели.

Что если заявок мало?

Performator так и скажет: оценка предварительная или вывода пока нет. Он не назовёт изменение удачным по трём заявкам.

Может ли агент применить изменение сам?

Нет. Агент только предлагает. Изменение применяется после вашего подтверждения, а перед записью кабинет перечитывается заново.

Как работает пробный период?

После регистрации у вас 7 дней тарифа «Базовый»: все функции, до 3 рекламных аккаунтов и 5 млн токенов агента. Карта не нужна, автоматических списаний нет.

Проверьте первую гипотезу на своём кабинете

Подключите кабинет и спросите агента, где уходит бюджет. Дальше — по циклу: решение за вами, итог — в цифрах.

Кому подходит: агентствам контекстной рекламы, специалистам по контекстной рекламе и владельцам бизнеса.

Начать бесплатно 7 дней тарифа «Базовый» · Без карты