Core AI против ручной оптимизации: результаты A/B-тестов за 2025 год

Оценивалось, как на ключевые показатели эффективности влияют инструменты Core AI: Персонализация креативов и Оптимизация кампаний. Делимся результатам годового исследования.

Что именно сравнивали

Во всех кварталах сравнивались результаты в рамках A/B-теста при соблюдении единых условий: кампании с использованием инструментов Core AI (Персонализация креативов и Оптимизация кампаний) и без них. Команда оценивала показатели CTR, CPC, количество PC (post-click) и PV (post-view) конверсий, а также их стоимость.

Core AI — это комплекс AI- и ML-решений для эффективного управления рекламными кампаниями в Hybrid Platform. 

Персонализация креативов (Creative Optimization) приоритезирует показы наиболее результативных баннеров на основе выбранных событий, кликов, конверсий и других показателей.

Оптимизация кампаний (ML Bid) позволяет автоматизировать управление ставками для роста KPI и более эффективного распределения бюджета.

Замеры и первые выводы фиксировались еще в 2024 году, а  2025-м мы решили перейти к формату квартальных отчетов. Это помогает и продуктовой команде точнее понимать, где нужно улучшить инструменты и одновременно дает рекламодателям понятную, проверяемую картину. Становится яснее, какие инструменты действительно эффективны в разных вертикалях и сезонах.

Q1 2025. Доказанная эффективность

В первом квартале 2025 Core AI дает измеримую экономию на клике и целевом действии. Самый показательный прирост был в вертикали «HoReCa». Количество PV-конверсий увеличилось в 2,6 раз, PC-конверсий — в 2,8 раз. Стоимость же PC-конверсий снизилась в 1,4 раза, а PV-конверсий — в 1,2 раза.

Q2 2025. Стабильный результат

Во втором квартале проведенные тесты показали, что с Core AI кампании показывают CPC ниже, CTR выше, а также более низкую стоимость конверсий и рост их количества.

Здесь самой показательной стала вертикаль «Отели». ML дал одновременное улучшение по всем ключевым метрикам. CTR вырос в 2 раза, а CPC снизился примерно втрое. Стоимость PC-конверсии стала ниже почти в 2 раза, а стоимость PV-конверсии — ниже в 4,3 раза.

Q3 2025. Автоматизация для улучшения

В третьем квартале наиболее интересный результат зафиксирован в «Медицине». Персонализация креативов дала рост CTR в 3,6 раз и снижение  CPC в 2 раза за счет приоритизации наиболее результативных баннеров. C Оптимизацией кампаний стоимость PC-конверсии и PV-конверсии стала ниже в 3 раза. При этом количество PV-конверсий выросло в 3,2 раза, а PC-конверсий — в 3,3 раза.

Также подсветим результаты в вертикали Авто. Здесь CTR вырос в 2,6 раза, CPC стал ниже на 11,3%, а стоимость PC-конверсии – ниже в 3 раза. Это хороший сценарий для performance-задач, где важно удерживать цену результата.

Q4 2025. Проверка на сезонном пике и подтверждение годовой модели

Q4 был крайне важен, потому что это высокий сезон, где сильно выше как конкуренция в аукционе, так и и цена ошибки.

Здесь вновь лучший результат в «Отелях». CPC снизился в 1,2 раза, стоимость post-click конверсии – в 2,2 раза, а стоимость post-view – в 5 раз. По объемам также сильная динамика: PC-конверсий стало в 5 раз больше, PV-конверсий – в 11 раз больше. С учетом предновогоднего периода и сезонно высокого спроса такой результат особенно показателен. Даже на фоне естественного роста интереса, Core AI дополнительно масштабирует существующий спрос за счет более точного распределения показов и приоритезации наиболее эффективных креативов. 

Итоги

Таким образом, Q1 дал подтверждение эффективности ML‑подхода, Q2 закрепил эффект в ключевых метриках, Q3 показал эффект масштаба на накопленных данных, а Q4 подтвердил устойчивость в самый дорогой сезон. 

Автоматизация особенно заметно проявляет себя там, где важны не только охват и трафик, но и стоимость целевого действия. С Core AI кампании стабильно показывают более низкий CPC, более высокий CTR, рост post-click и post-view конверсий и снижение их стоимости. В периоды сезонного спроса роль ML только усиливается, поскольку ручная стратегия хуже масштабируется в условиях дорогого инвентаря и высокой конкуренции. В будущем наша команда продолжит такие тестирования, чтобы фиксировать динамику результатов и точнее понимать, в каких сценариях Core AI дает максимальный эффект.

Главное преимущество Core AI не в замене человека, а в скорости обработки рыночных сигналов. В высоком сезоне 2025 года мы увидели, что аукцион меняется каждые несколько минут. Ручное управление физически не способно пересчитывать ставки и ротировать креативы с такой частотой без потери эффективности. Наши тесты доказали: пока человек анализирует отчет за вчера, алгоритмы ML Bid уже оптимизировали тысячи показов в реальном времени

Илья Лысенко

Data Science Product Lead в AdTech-экосистеме Hybrid