PR-отдел разместил десять материалов, через месяц бренд стали чаще называть в ответах ИИ-ассистентов. Вопрос, на который у агентства обычно нет ответа: это сработали публикации или просто изменилась модель. Разбираю, что тут поддаётся замеру, а что остаётся гипотезой.
Классический отчёт по кампании держится на охвате, количестве выходов, медиаиндексе и упоминаниях в тональности. Всё это описывает медиаполе, а не то, что из него забрала нейросеть.
Ответ ИИ-ассистента устроен иначе. Пользователь спрашивает «какой сервис выбрать», модель собирает ответ из обучающих данных и веб-поиска, называет два-три бренда и иногда даёт ссылки на источники. Клика по публикации может не быть вообще: материал сработал, но в отчёте он не оставил следа, кроме самого факта выхода.
Отсюда три вещи, которые ломают привычную атрибуцию:
Прежде чем спорить о методике, надо договориться о метрике. Я работаю с четырьмя, и они отвечают на разные вопросы.
Для PR-кампании ключевая метрика не первая, а третья. Brand Mention Rate растёт от всего сразу: от продукта, от отзывов, от форумов. Citation Rate по конкретным доменам показывает, дотянулись ли размещения до слоя, из которого модель собирает ответ.
Методика простая, но требует дисциплины до старта кампании, а не после.
Корректного эксперимента с контрольной группой в PR почти никогда не получится: вы не можете выпустить кампанию и одновременно её не выпустить. Значит, речь не о доказательстве, а о силе аргумента.
Сильный аргумент выглядит так: до кампании бренд появлялся в четырёх ответах из ста по небрендовым запросам, через три недели после выхода серии в семнадцати, при этом в источниках ответов начали появляться два домена из списка размещений, а у конкурентов за тот же период показатель не изменился.
Слабый аргумент выглядит так: после кампании упоминаний стало больше. Без базовой линии, без контрольной группы и без разбора источников это совпадение, и первый же въедливый клиент это вскроет.
Отдельно стоит сказать, чего измерение не даст. Оно не разложит эффект по отдельным публикациям, если они вышли одной волной. Оно не отделит вклад PR от вклада продуктового релиза, который случился в те же дни. И оно не отменяет обновлений моделей: сдвиг может прийти оттуда, поэтому контрольная группа обязательна.
Ручной прогон нескольких десятков формулировок по десяти ассистентам с повторами это тысячи запросов в месяц, и вручную такую рутину никто долго не ведёт. Я снимаю показатели в brandfound: сервис задаёт запросы ассистентам по расписанию, считает Share of Voice, Brand Mention Rate, Citation Rate и тональность, держит рядом конкурентов и показывает источники, из которых собран ответ. Есть и другие сервисы с похожей логикой, например GeoRank и AI Semantica, и выбор тут вторичен по отношению к методике: без базовой линии и контрольной группы любой из них даст график, который ничего не доказывает.
Измерить GEO-эффект PR-кампании можно, но не в логике «до и после», а в логике сравнения с контрольной группой на заранее зафиксированных запросах. Решение принимается не в отчёте, а на старте: если базовую линию не сняли, доказать вклад кампании потом будет нечем.