Суть задачи

Частые вопросы об отчёте

Можно ли сравнивать два рекламных кабинета по показанным конверсиям? Только после выравнивания периода и определения оплаченного заказа. Что делать с потерянными UTM? Помечать источник как неизвестный, а не угадывать кампанию. Достаточно ли красивого графика для решения о бюджете? Нет: нужны исходные строки и воспроизводимый расчёт.

Исходные данные

Знакомая ловушка отчёта

В понедельник команда видит: кликов стало на треть больше, стоимость клика снизилась, а продажи почти не изменились. Нейросеть легко напишет убедительное объяснение: «реклама привела менее заинтересованную аудиторию». Но из этих трёх чисел такое утверждение не следует. Сначала нужно понять, одинаковые ли периоды сравниваются, как собраны события, изменился ли сайт, какова задержка между кликом и покупкой. ИИ полезен как помощник в проверке гипотез, если не разрешать ему придумывать причинность по соседству чисел.

Рабочий маршрут

Проверьте входные таблицы

Перед анализом выгрузите расходы из рекламных кабинетов и события из аналитики за одинаковые даты и часовой пояс. Отметьте валюту и статус НДС. Посмотрите, не поменялось ли правило именования UTM-кампаний: одна буква в параметре может разбить поток на две строки. Удаляйте дубликаты только после понимания их происхождения. Зафиксируйте, что считается продажей: оплаченный заказ, отправленная заявка или просто достижение страницы. Если определения у источников разные, не сводите цифры в одну общую «конверсию» без пояснения.

Проверка

Задайте модели роль аудитора

Вместо вопроса «почему продажи упали» попросите перечень проверок: какие столбцы отсутствуют, где есть резкие скачки, какие метки не совпадают, какие выводы из имеющихся данных делать нельзя. Пусть она возвращает конкретные строки и формулы, а не только комментарий. Для каждого вывода укажите уровень уверенности и альтернативное объяснение. Не давайте модели прямой доступ к боевому рекламному кабинету на первом пилоте: работа с копией таблицы позволяет остановить случайное изменение бюджета и сохранить воспроизводимый вход.

Практический пример

Пример неоднозначного роста

Предположим, кампания получила тысячу дополнительных кликов после запуска новой формы, но число заказов за два дня не изменилось. Возможны как минимум четыре объяснения: трафик стал хуже, форма сломалась, покупки отстают на неделю или аналитика перестала получать событие оплаты. Из одного отчёта нельзя выбрать причину. Проверьте тестовый заказ, карту событий и дату изменения формы. Потом разбейте поток по устройствам, регионам и старым/новым объявлениям. Если ошибку события подтвердили, перерасчитайте базовый период прежде, чем объявлять падение эффективности.

Риски

Атрибуция не равна реальности

Разные системы могут приписывать одну покупку разным касаниям. Рекламный кабинет считает своё окно просмотра и клика, веб-аналитика — своё, CRM знает фактическую оплату и возврат. Не ожидайте, что числа сойдутся до единицы. Опишите правило сравнения: например, расходы из кабинета, оплаченные заказы из CRM, UTM из первого визита и семидневный лаг. Если меняется окно атрибуции, сравнение с прошлой неделей теряет смысл без пересчёта. Модель должна назвать это ограничение рядом с цифрой, а не прятать в конце презентации.

После запуска

Как не нарисовать выгоду

Если ИИ сократил время составления отчёта с двух часов до двадцати минут, это ещё не доказанный прирост прибыли. Считайте время на подготовку данных, исправление формул и обсуждение спорных выводов. Хороший пилот сравнивает одинаковый набор кампаний и показывает, сколько ложных интерпретаций удалось поймать. Для решения о бюджете смотрите не на красоту слайда, а на качество следующего действия: какую гипотезу проверили, сколько стоил тест, что изменилось в оплаченных заказах. Причину нельзя подменять корреляцией.

Внедрение

Пределы данных и приватность

В выгрузке могут оказаться адреса клиентов, телефоны и внутренние цены. Для анализа каналов часто достаточно агрегированных строк без идентификаторов. Удалите лишние поля до передачи модели и проверьте, где сохраняется файл. Если нужна проверка конкретного заказа, используйте псевдоним и отдельный защищённый маршрут. Не делитесь публичной ссылкой на таблицу ради удобства обсуждения. Ошибки доступа в данных опаснее неточного абзаца отчёта, потому что затрагивают людей, не участвующих в пилоте.

План на день

Что положить на стол руководителю

Итоговый документ должен содержать три слоя: подтверждённые наблюдения, гипотезы и план проверки. Например: «расход вырос на X по выгрузке», «часть заказов не имеет UTM», «нужен тест события оплаты». Рядом укажите источник числа и дату выгрузки. Если вывод может изменить бюджет, пусть второй человек проверит формулу и выборку. ИИ ускорит поиск несоответствий и первый черновик объяснения; решение о перераспределении денег остаётся у команды после проверки данных. Такой отчёт меньше впечатляет громким выводом, зато выдерживает следующий вопрос.

Вывод

Повторите расчёт без модели

Перед отправкой отчёта выберите один ключевой показатель и пересчитайте его вручную из сырых строк. Проверьте формулу знаменателя: показатель конверсии на сессию не равен показателю на уникального пользователя. Сравните сумму по каналам с общим итогом; если они не сходятся, запишите причину, например прямой трафик, потерянную метку или возвраты. Сохраните версию файла и список фильтров, чтобы другой сотрудник мог повторить расчёт. Если результат меняется после каждого обновления дашборда, фиксируйте дату среза, а не спорьте о «правильной» цифре вне контекста. Наконец, проверьте, не был ли сам тест выбран потому, что показал желаемый эффект. Без заранее заданного критерия успешности ИИ легко поможет написать красивое объяснение случайного колебания. Руководителю полезно увидеть и отрицательный результат: он показывает, что проверка сработала. Отсутствие роста за короткий период не является доказательством бесполезности канала, если цикл покупки длится месяц. Поэтому срок наблюдения задают до запуска кампании и не меняют после просмотра графика.