Чем заменить фокус-группу при тестировании рекламы
Не каждую рекламную концепцию нужно проверять на живой фокус-группе: часть ошибок можно обнаружить раньше с помощью цифровых респондентов, оставив полноценные исследования для задач, где без людей не обойтись.
Не каждую рекламную концепцию нужно проверять на живой фокус-группе: часть ошибок можно обнаружить раньше с помощью цифровых респондентов, оставив полноценные исследования для задач, где без людей не обойтись.
У маркетинговой команды есть несколько вариантов рекламной кампании, ограниченный бюджет и одна неприятная задача: выбрать, какие идеи стоит развивать. Провести фокус-группы для всех вариантов долго и дорого. Выбрать лучший на внутреннем обсуждении рискованно: мнение команды не всегда совпадает с восприятием целевой аудитории.
Но между этими двумя решениями есть промежуточный этап. С помощью искусственного интеллекта можно предварительно проверить концепции, обнаружить слабые места и сформулировать гипотезы для дальнейшего исследования.
Это не означает, что фокус-группы больше не нужны. Скорее меняется порядок работы: сначала быстрый отбор вариантов, затем подробное изучение вопросов, которые действительно требуют участия людей.
Сначала задача, потом метод исследования
Прежде чем выбирать между фокус-группой, глубинным интервью и цифровым тестом, полезно определить, какое решение предстоит принять.
Если задача — понять, считывается ли рекламное сообщение, необязательно сразу собирать людей для групповой дискуссии. Если же нужно разобраться, почему тема вызывает сильное раздражение или как меняется мнение участников в ходе обсуждения, индивидуальных оценок может оказаться недостаточно.
У разных исследовательских инструментов разные возможности.
Фокус-группа позволяет наблюдать за взаимодействием людей. Участники обсуждают идеи, соглашаются друг с другом, спорят, подхватывают чужие мысли. Исследователь видит, как формируется мнение, а не только слышит готовый ответ. Глубинное интервью помогает подробнее разобраться в индивидуальном опыте, мотивах и противоречиях конкретного человека. Количественное исследование позволяет оценить распространённость определённых мнений и моделей поведения в заданной аудитории.
А цифровой претест помогает на раннем этапе сравнить варианты, выявить непонятные формулировки, возможные барьеры и причины различий в оценках. Поэтому вопрос «чем заменить фокус-группу?» полезно переформулировать: какую часть её работы можно выполнить другим способом?
Что можно проверить с помощью цифровых респондентов
Цифровые, или синтетические, респонденты — это смоделированные с помощью искусственного интеллекта участники исследования. Каждый получает профиль представителя целевой аудитории: с определёнными характеристиками, потребительскими привычками, интересами и жизненным контекстом.
В отличие от обычного запроса к нейросети, в таком исследовании участвует множество профилей. Они отвечают на общую анкету, а система анализирует полученные оценки и аргументы.
Подробнее об устройстве метода мы рассказали в статье «Что такое синтетические респонденты и как они отвечают на вопросы».
В Fair Lab мы используем цифровых респондентов для предварительного тестирования идей, рекламных сообщений и концепций. Представим, что бренд подготовил пять вариантов рекламной кампании. Команде нужно понять, какие из них лучше передают основное сообщение, где считывается преимущество продукта и какие формулировки могут вызвать недоверие.
Цифровое исследование позволяет сравнить варианты по одинаковым параметрам и получить развёрнутые комментарии. Например, обнаружить, что одна концепция выглядит привлекательной, но не объясняет, почему стоит выбрать продукт. Или что другая содержит убедительное обещание, однако аудитория не понимает, кому оно адресовано.
Такие проблемы полезно выявлять до производства ролика или запуска кампании, когда ещё можно относительно недорого изменить сценарий, сообщение или визуальную идею. Сильная сторона метода — скорость и возможность проверять много вариантов. В зависимости от задачи и объёма исследования результаты можно получить за время от 15 минут до нескольких часов.
Но есть принципиальное ограничение: цифровые респонденты не являются реальными опрошенными людьми. Их ответы представляют собой результат моделирования. Поэтому они подходят для предварительного отбора гипотез, но не должны автоматически трактоваться как данные репрезентативного исследования потребителей.
Что нельзя заменить цифровым тестом
Главное отличие живой фокус-группы от синтетического исследования заключается в самом процессе обсуждения.
Представим, что участникам показывают рекламную концепцию. Один человек замечает в ней неприятный подтекст. Другой сначала не соглашается, но после обсуждения вспоминает похожую ситуацию. Третий предлагает неожиданную интерпретацию, которую никто не сформулировал бы самостоятельно. В результате исследователь получает информацию, которой не было в первоначальных индивидуальных ответах.
При стандартном цифровом тестировании такого взаимодействия нет. Респонденты отвечают независимо друг от друга. Они способны аргументировать реакцию и моделировать эмоциональные ответы, но не воспроизводят естественную групповую динамику.
Есть и другие ограничения.
Сильные эмоциональные реакции
Синтетические респонденты могут указывать на потенциально спорные элементы коммуникации, но хуже воспроизводят интенсивность личного негативного опыта. Особенно осторожно стоит интерпретировать результаты, когда реклама касается чувствительных социальных и культурных тем.
Сенсорный опыт
Искусственный интеллект может оценить описание напитка, визуальную концепцию упаковки или рекламное обещание, но не способен достоверно воспроизвести вкус, запах и тактильные ощущения.
Личный контекст
Когда решение зависит от конкретного жизненного опыта, модельные ответы могут оказаться более рациональными, чем реакции реальных людей.
В наших сравнительных исследованиях мы наблюдаем три характерных смещения: повышенную осведомлённость цифровых респондентов о брендах, более рациональные ответы в вопросах физического опыта и недостаточную выраженность сильного негатива.
Мы подробно описали эти ограничения в материале «Где синтетические респонденты ошибаются: три известных смещения».
Отсюда практический вывод: если исследование зависит от личной истории, непосредственного опыта использования продукта или коллективного обсуждения, цифровой тест может помочь сформулировать гипотезы, но для их проверки потребуются реальные участники.
Как совместить цифровой тест и фокус-группу
Вместо выбора единственного инструмента можно распределить задачи по этапам.
Этап 1. Предварительно отобрать рекламные концепции
Допустим, команда разработала несколько вариантов кампании. Проверять каждый на полноценной фокус-группе необязательно.
Сначала можно провести синтетический претест: загрузить концепции, определить целевую аудиторию и получить ответы на одинаковые вопросы.
На этом этапе полезно выяснить, какие идеи аудитория понимает правильно, какие вызывают вопросы и где возникают барьеры восприятия.
Важна не общая симпатия, а конкретные характеристики коммуникации. Понятно ли предложение? Считывается ли основное сообщение? Соответствует ли идея ожиданиям аудитории? Не возникает ли недоверия?
Результаты позволяют определить перспективные варианты, отправить часть концепций на доработку и исключить очевидно слабые решения.
Этап 2. Проверить сложные вопросы на живых людях
После предварительного отбора задача меняется.
Вместо общего обсуждения всех вариантов исследователи могут сосредоточиться на нескольких перспективных концепциях и вопросах, на которые цифровой тест не дал достаточно убедительного ответа. Например, выяснить, почему определённый образ вызывает противоречивые реакции, какие ассоциации возникают при коллективном обсуждении или как меняется отношение к обещанию бренда под влиянием чужих аргументов.
Здесь полезна живая фокус-группа. Причём сценарий беседы можно строить на гипотезах, полученных после цифрового исследования. В результате время участников и модератора расходуется на более сложные вопросы, а не на первичное знакомство с заведомо слабыми идеями.
Этап 3. Подтвердить решение на реальной аудитории
Даже если цифровые респонденты и участники фокус-группы одинаково оценили концепцию, это ещё не гарантирует эффективности будущей рекламной кампании.
На следующем этапе могут потребоваться количественный опрос, эксперимент или A/B-тестирование на реальном трафике. Выбор зависит от того, что именно предстоит измерить: распространённость определённого мнения, намерение совершить действие или фактическое поведение аудитории.
Важно не путать предварительное сравнение идей с прогнозом коммерческого результата. Синтетический тест может помочь определить, какой вариант выглядит перспективнее. Но вывод о том, сколько людей действительно купят продукт, требует других доказательств.
Насколько точны результаты цифровых исследований
Быстрый результат полезен только тогда, когда понятно, насколько он сопоставим с реакциями реальных потребителей. Для проверки метода мы в Fair Lab проводим валидационные исследования: воспроизводим ранее состоявшиеся тесты на цифровых респондентах и сравниваем результаты с ответами живых участников.
В рамках более чем 100 сравнительных тестов с совокупным участием свыше 12 тысяч живых и цифровых респондентов мы получили следующие результаты:
- 87% совпадений по выбору лидирующего варианта. В такой доле тестов цифровые респонденты поставили на первое место тот же вариант, что и живые участники.
- 80% совпадений по тройке сильнейших вариантов.
- 85% совпадений по ключевым инсайтам, мотивам и барьерам, выявленным в открытых ответах.
Это результаты внутренней валидации Fair Lab. Они характеризуют совпадение выводов в проведённых сравнительных исследованиях, а не универсальную точность технологии. Принципиально и то, что эти показатели относятся прежде всего к относительным оценкам. Если цифровые респонденты считают концепцию А сильнее концепции Б, результаты наших сравнительных исследований дают основания использовать этот сигнал при предварительном отборе.
Но если 42% цифровых респондентов заявили о намерении купить продукт, это не означает, что ровно такая же доля реальных покупателей поступит аналогично.
Подробную методологию и результаты мы опубликовали в статье «Насколько точны синтетические респонденты: что показали 100+ сравнительных тестов».
Поэтому синтетические исследования разумно применять для выбора между вариантами и поиска причин различий. Абсолютные показатели и решения с высокой ценой ошибки следует дополнительно проверять на реальной аудитории.
Почему предварительный цифровой тест полезен даже при наличии бюджета на фокус-группы
Ценность такого подхода заключается не обязательно в сокращении исследовательского бюджета.
Компания может потратить на финальное исследование столько же, сколько планировала изначально. Но при этом проверить больше гипотез на предварительном этапе и направить ресурсы живого исследования на наиболее перспективные варианты.
В нашей практике был пример крупной FMCG-компании, которая встроила Fair Lab в процесс предварительного отбора рекламных идей. До следующего, более затратного этапа исследования доходили концепции, прошедшие цифровую проверку.
Это позволяет иначе распределять время и внимание исследователей. Вместо того чтобы выяснять на дорогой фокус-группе, почему одна из десяти идей не работает, команда может заранее исключить часть слабых вариантов и сосредоточиться на вопросах, требующих более подробного изучения.
Впрочем, такая последовательность нужна не всегда.
Если задача изначально связана с эмоционально чувствительной темой, реальным опытом использования продукта или сенсорными характеристиками, логичнее сразу выбирать метод с участием людей. Поэтому замена фокус-группы не должна становиться самоцелью. Гораздо полезнее определить, какую неопределённость нужно устранить, насколько велика цена ошибки и какие данные будут достаточными для принятия решения.
Цифровые респонденты помогают быстрее отбирать гипотезы. Живые исследования позволяют проверить то, что невозможно достоверно воспроизвести в модельных ответах. Вместе эти инструменты могут сформировать последовательный процесс проверки рекламных идей: от раннего отбора концепций до принятия решения о запуске.
Подробнее о том, какие задачи фокус-группы можно доверить цифровым респондентам, а какие требуют участия людей, мы рассказали в блоге Fair Lab.