Директ обучился на нецелевых: как сбросить обучение

Директ обучился на нецелевых: как сбросить обучение

Кнопки сброса обучения в Директе не существует. Разбираем, что теряется при каждом способе перезапуска и почему менять надо сигнал, а не кампанию.

Директ обучился на нецелевых: что делать и с чего начинать

Кнопки «сбросить обучение» в интерфейсе Яндекс Директа не существует — и даже если бы она была, нажимать её первым делом было бы ошибкой.

Алгоритм не запомнил плохих клиентов. Он построил корректную модель на тех событиях, которые вы сами засчитывали конверсиями. Модель верна — некорректен вход.

Перезапуск кампании без смены сигнала возвращает ту же ситуацию через две-три недели — только за ваш бюджет. В этой статье разбираем, что на самом деле происходит при каждом способе «сброса», какие данные теряются, а какие остаются нетронутыми, и в каком порядке действовать, чтобы не платить дважды.

определение

Как работает обучение автостратегии

Автостратегия обучается на потоке конверсий: чем больше событий определённого типа она получает, тем увереннее ищет похожих пользователей. Если в качестве конверсий засчитывались нецелевые обращения — алгоритм закрепляет именно этот профиль аудитории. Отдельной операции «сбросить обучение» в интерфейсе нет. Есть несколько способов перезапустить кампанию, и каждый обходится по-своему.

Коротко: пять фактов, которые меняют угол зрения

  1. 01

    Кнопки сброса не существует. Всё, что описывают как «сброс» — это способы пересоздать кампанию, и у каждого своя цена в потерянных данных и времени.

  2. 02

    Сбрасывать по сути нечего: алгоритм не запомнил плохих клиентов, а построил корректную модель на тех событиях, которые вы засчитывали конверсиями.

  3. 03

    Правило порядка: сначала меняют сигнал, потом решают, нужен ли перезапуск. Перезапуск без смены сигнала возвращает ту же ситуацию через две-три недели.

  4. 04

    Под «историей» путают три разных актива: модель стратегии, статистику кампании и данные в Метрике. Данные Метрики не теряются ни при одном способе перезапуска.

  5. 05

    Смена цели на «правильную» — самая частая и при этом рискованная правка: квалифицированных заявок обычно в разы меньше, и кампания может застрять из-за нехватки данных.

Кнопки сброса нет — и сбрасывать нечего

Типовая постановка задачи звучит так: «кампания привыкла к плохим лидам, надо обнулить алгоритм и начать заново». Человек ищет операцию, которой не существует. На самом деле в интерфейсе есть несколько способов пересоздать кампанию целиком или частично: сменить оптимизируемую цель, изменить стратегию, скопировать кампанию или создать новую. «Сброс» — это просто обиходное название для любого из них.

Но есть кое-что важнее самого факта отсутствия кнопки. Даже если бы такая операция существовала, она не решила бы задачу. Алгоритм не хранит список плохих клиентов — он построил модель того, кто совершает засчитываемые вами конверсии. Эта модель корректна. Некорректен вход, который вы ей дали.

Отсюда прямое следствие: перезапуск без смены входа даёт ровно тот же результат через две-три недели. Вы платите за повторное обучение тому же самому. Именно поэтому начинать нужно не с кампании, а с того, что она считает конверсией.

Сначала сигнал: три способа изменить вход

Первый и самый прямой способ — сменить оптимизируемую цель. Если алгоритм учился на «отправке формы», а половина форм — мусор, целью должна стать квалифицированная заявка. Для этого статус квалификации должен возвращаться из CRM в Директ — это типовая функция инструментов сквозной аналитики (Roistat, Calltouch, CoMagic, K50) либо передача офлайн-конверсий.

Но здесь скрыта ловушка, из-за которой правка часто делает хуже. Квалифицированных заявок всегда меньше, чем всех. Если было 80 обращений в месяц и четверть из них целевые, после смены цели алгоритм получает около пяти конверсий в неделю вместо восемнадцати. Это ниже порога, при котором конверсионная стратегия способна обучаться. Кампания не переучится — она застрянет.

Выход — собрать микс из основной цели и релевантной промежуточной, дающий достаточный суммарный объём. Промежуточная цель должна быть связана с целевым действием, а не просто частой — иначе вы меняете один мусорный сигнал на другой.

Второй способ — задать исключения. Аудитории, которые заведомо не должны попадать в обучение: уже купившие, действующие клиенты, нецелевые сегменты по гео или профилю.

Третий способ — вычистить источник. Если нецелевые приходят с конкретных площадок, по конкретным запросам или на конкретный оффер — вход чинится там, а не в настройках цели. Это самый надёжный из трёх: он убирает причину, а не фильтрует следствие.

После смены сигнала кампания в большинстве случаев переучивается сама: новые конверсии постепенно вытесняют старые из обучения, и через две-три недели профиль аудитории меняется. Никакой перезапуск для этого не нужен.

инвентаризация активов кампании

Что происходит с каждым активом при перезапуске

Страх «потерять историю» почти всегда неконкретен. У кампании есть шесть разных накоплений, и они ведут себя при перезапуске по-разному. Часть не теряется вообще, часть восстанавливается за дни — и только одно теряется по-настоящему.

AСмена цели
BСмена стратегии
CКопирование
DС нуля
АктивABCD
Модель обучения стратегии2–3 нед2–3 нед2–3 нед2–3 нед
Статистика кампании для отчётовсохраняетсясохраняетсятеряется в новойтеряется
Накопленные показатели качествасохраняетсясохраняетсячастично, 1–2 нед2–4 нед
Ретаргетинговые сегменты и аудиториисохраняетсясохраняетсясохраняетсясохраняется
Данные в Метрикесохраняетсясохраняетсясохраняетсясохраняется
Минус-слова, корректировки, настройкисохраняетсясохраняетсяс копиейзаново

⚠ Сроки — ориентиры, зависящие от объёма трафика. Кампания с большим потоком проходит переобучение быстрее, с малым — дольше или не проходит вовсе.

Три вывода из этой матрицы снимают большую часть паники.

Во-первых, данные в Яндекс Метрике не теряются ни при одном способе. Они принадлежат счётчику, а не кампании. Вся аналитика за прошлые периоды остаётся доступной всегда — это самый частый и самый беспочвенный страх.

Во-вторых, ретаргетинговые сегменты тоже не теряются. Они живут в Метрике и Аудиториях, а не внутри кампании.

В-третьих — и это ключевое — модель обучения обнуляется одинаково при всех четырёх операциях. Любое существенное изменение возвращает кампанию к переобучению. Это значит, что выбор между «мягкой» правкой и полным пересозданием не влияет на главную потерю: она одинакова. Различаются только сопутствующие потери.

Отсюда практический вывод, переворачивающий типовую логику: раз модель переобучается в любом случае, выбирать надо не по силе воздействия на алгоритм, а по объёму сопутствующих потерь. Смена цели даёт тот же эффект переобучения, что создание с нуля, — но без потери статистики, качества и настроек. Значит, начинать всегда следует с самой лёгкой операции: не потому что она «щадящая», а потому что тяжёлая не даёт выигрыша.

Когда перезапуск действительно нужен

Если модель переобучается при любой правке, зачем вообще пересоздавать кампанию? Есть три ситуации, где это оправдано — и все они узкие.

Структура кампании не позволяет разделить сигнал. Внутри одной кампании смешаны сегменты с разной экономикой или разными целевыми действиями. Никакая смена цели не поможет: алгоритм всё равно будет оптимизировать на среднее. Здесь нужна не новая кампания, а разделение на несколько.

Накопленные настройки сами являются проблемой. Разросшийся список минус-слов, отсекающий целевой спрос; корректировки, поставленные по неверной статистике; структура групп, собранная под другую задачу. Когда правок больше, чем осталось исходного, проще собрать заново.

Смена цели невозможна технически. Если нужное событие нельзя задать в текущей кампании из-за её типа или настроек оплаты — требуется другая кампания.

Во всех остальных случаях перезапуск — лишняя операция. Он не ускоряет переобучение и не «очищает» алгоритм лучше, чем смена цели, но обнуляет статистику и накопленное качество. Критерий для вмешательства: доля целевых обращений устойчиво ниже норматива на протяжении двух-трёх недель — не разовое колебание, а устойчивая тенденция.

Цена неверного порядка: модельный пример

Чтобы разница в подходах стала осязаемой, разберём конкретную ситуацию. Это модельный пример для демонстрации логики — не бенчмарк.

Кампания B2B-услуг. Бюджет — 200 000 ₽ в месяц, 80 обращений, из них квалифицированных 20 (25%). CPL — 2 500 ₽, CPLQ — 10 000 ₽.

Сценарий 1 — сразу перезапуск. Маркетолог копирует кампанию, считая, что новая «начнёт с чистого листа». Кампания уходит в переобучение на три недели, в этот период эффективность падает примерно до 55% от штатной. Потери на переобучение: около 62 000 ₽. Через три недели — цель та же, исключений нет, источник тот же. Доля целевых снова 25%. Итог: минус 62 тысячи и ноль изменений.

Сценарий 2 — сначала сигнал. Первый шаг: меняем цель на квалифицированную заявку и проверяем объём. 20 квалифицированных в месяц — это около 4,6 в неделю, ниже порога обучения. Одна эта правка застопорила бы кампанию. Поэтому второй шаг: собираем микс — квалифицированная заявка плюс релевантное промежуточное действие, суммарно около 17,6 конверсий в неделю. Третий шаг: добавляем исключения по нецелевым сегментам. Четвёртый шаг: ждём три недели без правок, перезапуск не делаем.

модельный пример · b2b-услуги · бюджет 200 000 ₽/мес

Результат: сигнал vs перезапуск

01Сразу перезапуск
потери на переобучение≈ 62 000 ₽
доля целевых через 3 нед25% → 25%
CPLQ10 000 ₽ → 10 000 ₽
Ноль изменений. Причина в том, что перезапускалась кампания, а не сигнал.
02Сначала сигнал
обращений (было → стало)80 → 44−45%
квалифицированных20 → 26+30%
доля целевых25% → 59%
CPLQ10 000 ₽ → 7 692 ₽−23%
Обращений меньше, цена обращения выросла — в стандартном отчёте это выглядит как провал. Но квалифицированных заявок стало больше, а их цена упала на четверть.

Договариваться о том, по какой метрике оценивать работу — объёму или результату — нужнодоправок, а не после.

Обратите внимание на верхние строки таблицы из второго сценария. Обращений стало почти вдвое меньше, цена обращения выросла на 82%. В стандартном отчёте это выглядит как провал. При этом квалифицированных заявок стало больше, а их цена упала почти на четверть.

Это та же ситуация, что при любом ужесточении квалификации: метрика объёма ухудшается, метрика результата улучшается. Именно поэтому договариваться о том, по какой метрике оценивать работу, нужно до правок, а не после — иначе правильные действия будут выглядеть как ошибка.

Протокол: что делать и в каком порядке

  1. 01

    Проверить, что проблема есть. Доля целевых устойчиво ниже норматива две-три недели подряд — не разовое колебание.

  2. 02

    Найти, какой сигнал испортил обучение. Мусорная цель, нецелевой источник трафика или оффер, привлекающий не тех.

  3. 03

    Изменить сигнал — цель, исключения или источник. Начинать с самого лёгкого воздействия.

  4. 04

    Проверить достаточность объёма после смены цели. Если конверсий стало меньше порога — собрать микс с релевантным промежуточным действием.

  5. 05

    Выждать две-три недели без правок. Любое изменение в этот период перезапускает отсчёт переобучения.

  6. 06

    Оценить и только потом решать о перезапуске. Если доля целевых пошла вверх — перезапуск не нужен. Если стоит на месте при изменённом сигнале — смотреть три случая из раздела выше.

Чего не делать

Четыре ошибки, которые обнуляют результат или затягивают переобучение.

Типичные ошибки

  • Пересоздавать кампанию, не изменив сигнал — через три недели ситуация повторится.
  • Менять несколько параметров одновременно — невозможно понять, что сработало.
  • Оценивать результат раньше двух недель — кампания ещё в стадии переобучения.
  • Менять цель на редкую, не проверив объём конверсий — кампания застрянет, а не переучится.

Как правильно

  1. 01

    Сначала менять сигнал, потом — при необходимости — структуру кампании.

  2. 02

    Одно изменение за раз, с фиксацией даты и гипотезы.

  3. 03

    Ждать минимум две недели до следующей оценки.

  4. 04

    Перед сменой цели считать недельный объём конверсий по новому событию и при нехватке собирать микс.

Главное: порядок важнее операции

Алгоритм Директа не запомнил плохих клиентов — он построил корректную модель на том входе, который вы ему дали. Поменяйте вход, и модель перестроится сама.
  1. 01

    Кнопки сброса обучения не существует. «Сброс» — это обиходное название для пересоздания кампании в той или иной форме.

  2. 02

    Модель обучения обнуляется одинаково при любой существенной правке. Выбирать между операциями нужно по объёму сопутствующих потерь, а не по «силе воздействия» на алгоритм.

  3. 03

    Данные в Яндекс Метрике не теряются ни при одном способе перезапуска — это самый частый и самый беспочвенный страх.

  4. 04

    Смена цели на квалифицированную заявку — правильный шаг, но опасный без проверки объёма: кампания может застрять из-за нехватки конверсий.

  5. 05

    Перезапуск оправдан только в трёх узких случаях: смешанные сегменты, накопленные настройки-проблемы или техническая невозможность сменить цель.

  6. 06

    Договариваться о метрике оценки — CPL или CPLQ — нужно до правок, а не после: правильные действия часто выглядят как ухудшение в стандартном отчёте.

Правильный порядок действий всегда один: сначала найти и изменить сигнал, затем выждать две-три недели, и только потом — если доля целевых не изменилась — рассматривать перезапуск кампании. Этот порядок экономит бюджет на переобучении и сохраняет накопленную статистику.

Часто задаваемые вопросы

Узнайте, какая доля ваших заявок — нецелевая

Проверим источники заявок и покажем, на чём учится ваша реклама

  • Бесплатный аудит
  • Разбор ваших кампаний

Политика конфиденциальности

При оставлении заявки на ресурсе «https://gurucontext.ru» пользователи предоставляют следующие сведения:

  • Имя
  • Контактный телефон или Telegram
  • Адрес сайта пользователя (не обязательно)

Также администрация сайта получает данные об IP-адресе посетителей, типе браузера, времени нахождения на сайте и прочие подобные сведения через сервисы статистики.

Использование информации

Вся полученная информация используется администрацией «https://gurucontext.ru» исключительно в целях связи с клиентом.

Защита персональных данных

Компания «https://gurucontext.ru» обязуется не разглашать сведения, полученные от пользователей, и хранит их в защищённом виде.

Предоставление данных третьим лицам

Полученные сведения не передаются третьим лицам, за исключением случаев исполнения обязательств перед клиентом (с его разрешения) и обоснованных требований закона.

Контакты

Телефон: +7 (499) 955-47-00.
E-mail: info@gurucontext.ru.