Сравнение прогнозов прогнозатора бюджета Яндекса с реальными результатами

В стародавние времена Яндексом был придуман собственный инструмент для прогнозирования рекламной кампании в поиске.

И рассчитывал Яндекс, что любой рекламодатель может зайти туда и получить ответ на вопрос «А что я получу с этой рекламы в Директе?»

И пользовались этим инструментом все: и рекламодетели, и агентства (которые на основе его составляли прогнозы для рекламодателей), и сами рекламисты для всякой собственной рекламы.

И получали все ответ на свой окаянный вопрос

И потом все дружно обкакивались разочаровывались, ибо не сбывался прогноз как должно. Об этой и пойдёт дальнейший рассказ.

В целом, статья рассчитана на людей опытных и знакомых с этих инструментов

Но пройдёмся по-пунктно как сделать собственный прогнозы в Яндексе

Заходите в свой кабинет:

Нажимаете «Инструменты» - «Прогноз бюджета»

У вас отрывается такое окно:

Далее нужно выбрать регион в котором вы планируете рекламироваться.

Для этого нажимаете «уточнить» и ставите галочку напротив нужного региона.

И нажимаете «ок».

Параметры расчёта мы обычно не меняем.

Теперь надо указать ключевые слова (фразы по которым вы хотите показываться) и минус фразы (если пользователь вводит это слово, то ваше объявление не показывается).

Можете обратить внимание, на Подсказки (по сути, это правая колонка вордстата). Там можно найти дополнительные ключевики.

И нажимаете на кнопку внизу.

В чем проблема: прогнозы и реальные данные настолько различаются, что сейчас мы вообще отказались от того, чтобы давать хоть какие-то прогнозы клиентам.



Что можно точно сказать:

1. Значительная часть рекламы сейчас ведётся через РСЯ и Мастер кампании. для них этот прогноз в принципе не применим, т.к. это совершенно разные механизмы.

2. Данные для прогнозов собираются на основе исторических данных рекламы на поиске. И эти данные сейчас сильно искажены Мастер кампаниями. Которые также показываются на поиске, но только кому и почему, это уже вопрос. И я искренне надеюсь, что хотябы главные инженеры Яндекса знают на него ответ.

3. Из-за глобальных геополитических сдвигов сильно изменился рынок и давать прогноз на основе того, что было до февраля 2022 довольно сомнительное решение.



Почему в целом прогнозы на основе исторических данных сейчас не работают (раскрываем 3-ий пункт):

- Изменился состав рынка рекламы. Рекламодатели из ФБ и гугла либо вообще перестали быть рекламодателями, либо перешли в яндекс (и задрали уровень конкуренции до небес). При том, непонятно в каком объёме и в каких пропорциях.

- Рекламодатели ушли из РФ. При том, те кто ушли – это гиганты рынка

- Изменилось настроение людей. От стабильной системы, мы перешли во время неопределённости.

- Все эти изменения происходят каждый месяц в любую сторону.



Однако предположим, что всего этого нет.

И мы всё равно хотим заранее узнать результат поисковой рекламы.

Что нужно учесть при построении прогноза и откуда возникнет дальнешая погрешность:

Проблема 1.

Мы не можем учитывать все минус фразы из реальных кампаний.

В большинстве поисковых РК даже на этапе запуска количество минус фраз сильно превышает лимит.

А на дистанции в год ведения минусов несопоставимо выше.

Проблема 2.

Мы не можем учитывать всех ключей по которым будем показываться.

Даже 1 группа с ее лимитом в 200 ключей не всегда обрабатывается прогнозатором.

Проблема 3.

Мы не можем учитывать того, что показы распределяются по другим, похожим, запросам и то, что мы делаем кросс-минусацию в реальной РК

Проблема 4.

Мы получаем статистику по определённому ключу и мы не знаем как распределяться показы по нему и по вложенным запросам. Которые мы не загнали в прогнозатор



Проблема 5.

Учитывайте, что в прогнозаторе нельзя указывать промежуточные значения по объёму трафика
И нельзя указывать значения больше 100%. В реальных кампания 120 – 140% часто встречаются.



Проблема 6.

Ещё одна проблема для прогнозирования бюджета в реальных условиях, объём показов практически никогда не соответствует ожидаемым.

И он меняется в течении суток

Для дальнейшего анализа берём следующие тематики:

Стоматология

Установка окон

Грузоперевозки

Продажа нержавеющих труб

Продажа нержавеющих листов

Продажа алюминиевых листов



Из каждой тематики берём по 3 прогноза и 3 реальных статистики по ключам за 1 месяц. Регион в прогнозаторе и в кампании совпадают

Для специалистов:

Мы не используем принцип «1 ключ – 1 объявление» в своих кампаниях. Вывода нет. Просто учитывайте, что дальнейшая статистика по реальным кампаниям взята с принципа «1 ко множеству»

Вот статистика и прогнозы для дальнейшей работы:

А теперь запихнём данные из скриншотов в экселевскую таблицу

А теперь сравним эти данные

И все дальнейшие выводы будем делать на основе этой таблицы

Перед тем как переходить к выводам, определим, что мы ищем.

Основное допущение:

«В идеальной ситуации, все значения в таблице «сравнение» были бы равны 1, т.к. если реальные значения = прогнозируемым, то при делении, мы получим 1»

1 нет нигде. Но никто этого и не ожидал.

Начнём с базы. Количество показов

Прогнозируемый объём показов вообще никак не коррелирует с реальным.

Реальные значения отличаются как в большую так и в меньшую сторону. В несколько раз

Вывод по прогнозированию объёма показов: лучше вообще не делать. Т.к. будет очень неточно. Но если надо, то прогнозируемое значение умножайте на 0,27

С кликами, всё также безнадёжно плохо.

Значение сильно всё ещё очень сильно колеблется в большую и меньшую сторону.

Однако, здесь отклонение намного меньше чем у объёма показов.

Удивительно, но именно кликабельность довольно точно отрабатывается.

Да, имеются выбросы. Но мы можем видеть, что данные себя ведут стабильно и в большинстве случаев отклонение равно +-0,3

Да и в среднем получается что прогноз отличается от реальности всего на 0,13.

И это хорошо

Вывод по прогнозированию кликабельности: про кликабельность можем делать уверенный вывод на основе прогноза. Желательно добавить множитель 0,87 к прогнозу.

СРС стабильно держится выше прогноза. Причём в 2 раза.

Имеются выбросы (кудаже без них). Однако само отклонение от прогноза +- одинаково.

Здесь ситуация грустная:

Имеются отклонения в большую и в меньшую сторону.

При том, в среднем бюджет Директа сильно ниже ожидаемого. В результате может выйти ситуация, что вы закладываете один бюджет, а в итоге имеете совершенно другой. И этот другой отличается в 10-ки раз

Продающий заголовок: Механизм работы + 15 шаблонов + примеры.

после нажатия на кнопку вас перебросит в приложение где наш бот отправит вам материал

Стандартный список минус фраз

Как использовать? Где использовать? Как составить?

после нажатия на кнопку вас перебросит в приложение где наш бот отправит вам материал

Как и всегда в статистике экстремально значения могут дать выбросы. Поэтому лучше с ними не работать.

В целом этот вопрос заслужил бы вообще отдельного рассмотрения: сделать отдельно таблицу и посмотреть, как прогнозы на сверх низкочастотных фразах покажут себя на практике. Но мы так делать не будем.

В данной таблице всего 2 экстремальных значения: строка 4 и строка 20. И одна из них показала неадекватные значения. Я бы задумался.

Самым простым выводом будет:

Если объём прогнозируемых показов меньше 10, то лучше вообще игнорировать прогноз

Вывод по прогнозированию объёма показов: лучше вообще не делать. Т.к. будет очень не точно. Но если надо, то прогнозируемое значение умножайте на 0,27

Вывод по прогнозированию объёма кликов: лучше вообще не делать. Т.к. будет очень не точно. Но если надо, то прогнозируемое значение умножайте на 0,236

Вывод по прогнозированию кликабельность: про кликабельность можем делать уверенный вывод на основе прогноза. Желательно добавить множитель 0,87 к прогнозу.

Вывод по прогнозированию кликабельности: про кликабельность можем делать уверенный вывод на основе прогноза. Желательно добавить множитель 0,87 к прогнозу.

Вывод по прогнозированию стоимости бюджета: бюджет лучше не закладывать на основе прогнозатора. Но если очень надо, то добавляйте множитель 0,5

Если объём прогнозируемых показов меньше 10, то лучше вообще игнорировать прогноз


Но это ещё не все…

А что будет, если бы мы эти коэффициенты подставили в наши изначальные данные?

Мы бы получили следующую таблицу.

Подставив коэффициенты, мы получили бы одинаковые средние значения в прогнозе и реальности.

Но теперь пора приглядеться и сделать ещё более глубокие вывод:

Хоть средние значения в итоге и стали лучше после того как мы добавили коэффициенты, но каждый конкретный случай всё ещё остаётся непредказуемым

И как это применить на практике:

1. Если вы рекламодатель и вам нужно один раз запустить кампанию, то лучше сделать наобум и не заморачиваться с прогнозатором, т.к. реальные значения буду отличаться от прогнозов в 10-20 раз с вероятностью 20-30%

2. Если вы рекламщик, то вы конечно улучшите свои прогнозы для клиентов за счёт подстановки коэффициентов, но в каждом конкретному случае, вы не будете точны.

3. Если вы рекламщик, то вам есть смысл сделать собственную табличку для расчёта корретировок для прогноза. Чтобы не полагаться на сторонние данные. Так вы хотябы сможете быть уверены в их достоверности.

Думаю, в материале набралось достаточное количество аргументов, чтобы сказать:

« Хотите сделать прогноз на рекламу максимально точно? Тогда просто запустите тестовую кампанию на 2 недели. У вас наберётся достаточное количество точных данных для прогнозирования РК на год вперёд.»



Материал хотелось бы закончить словами великого:

Алексей Грибков

автор

основатель Adkit.ru

- 8 лет опыта
- 500+ реализованных проектов
- 90+ написанных статей

Дружить:

Связаться:

Наши статьи: