Репрезентативная выборка в аудите: сколько точек и как их выбирать

Первый вопрос к любой цифре аудита — «на скольких магазинах?». За ним почти всегда следует второй: «а это достаточно?». Честный ответ на оба вопроса — не число. Выборка строится под задачу: для оценки работы мерчандайзеров, контроля промо и замера общих показателей рынка она устроена по-разному. Представительность определяется тем, из какого перечня точек отобрана выборка, как она распределена по сетям, форматам и городам и насколько сопоставим её состав между волнами. Размер отвечает за другое — за точность, и её можно посчитать заранее.

Подкаст по теме статьи можно прослушать по ссылке 

Это практическое руководство о том, как построить выборку для торгового аудита, ценового мониторинга и исследований в точке продаж, сколько точек закладывать на сеть и город и какие ошибки чаще всего делают результат непригодным для решений. Для трейд-маркетинга, продаж, инсайт-команд и всех, кто заказывает полевые исследования.

С чего начинается выборка: универсум

Выборка всегда представляет что-то конкретное. Прежде чем считать точки, нужно назвать это «что-то» — универсум: совокупность магазинов, о которой будут делаться выводы. Универсум задаётся тремя решениями.

1. Каналы и форматы. Только федеральные сети или вся современная торговля; гипермаркеты, супермаркеты, магазины у дома, дискаунтеры; нужна ли традиционная розница.
2. География. Вся страна, приоритетные регионы или конкретные города.
3. Правило включения точки. Например, наличие категории на полке, собственная дистрибуция бренда, точки маршрутов агентства или адресная программа акции.

На выходе — перечень точек с признаками: сеть, формат, регион, населённый пункт и его размер. Из этого перечня отбирается выборка, поэтому его качество напрямую определяет качество результата. Как поддерживать перечень в актуальном состоянии, разобрано в статье «Сенсус торговых точек: зачем актуализировать базу розницы».

Три задачи — три разные выборки

Самая частая ошибка начинается до любых расчётов: одну и ту же логику выборки применяют к задачам, у которых разный универсум. На практике встречаются три типа задач.

i Пример: оценка агентства

Агентство обслуживает 2 000 точек силами 40 мерчандайзеров, по 50 точек на каждого. Если взять 200 точек случайно по всему списку, на одного мерчандайзера в среднем придётся 5 проверок, а на кого-то — 1–2: по такой выборке можно оценить агентство в целом, но не каждого сотрудника. Если задача — рейтинг мерчандайзеров и привязка бонуса, выборка строится по 8–10 точек на каждую территорию, оценка накапливается за несколько волн, а точки внутри территории от волны к волне меняются, чтобы проверка не была предсказуемой. Подробнее — в статье «Платите агентству за результат: аудит по OSA и доле полки».

Четыре принципа репрезентативной выборки

1. Сопоставимые сети и форматы. Если результат будет сравниваться по сетям, точность оценки по каждой сети должна быть сопоставимой — для этого задаются минимум и максимум точек на сеть (подробно ниже). Форматы внутри сети фиксируются отдельно: выкладка, ассортимент и промо в гипермаркете и магазине у дома одной вывески различаются кратно.
2. Распределение по стратам по численности населения. Населённые пункты делятся на группы, и выборка распределяется между ними пропорционально тому, сколько точек универсума приходится на каждую группу.
3. Случайный отбор внутри групп. Перечень делится на группы — сеть, формат, страта, — и внутри каждой точки отбираются случайно. Не по близости к офису, не по списку «показательных» магазинов от сети и не по выбору исполнителя. Образцовые магазины покажут образцовую полку, а ближайшие к маршрутам — то, что мерчандайзер успел поправить.
4. Сопоставимость состава между волнами. Динамика имеет смысл, только если от волны к волне меняется рынок, а не структура выборки. Между волнами сохраняется число точек в каждой группе: сеть × формат × населённый пункт. Сами магазины можно менять на сопоставимые — та же сеть, тот же населённый пункт, тот же формат, — и каждая замена документируется.

Сколько точек: размер выборки и точность

Размер выборки не делает её представительной — представительность обеспечивают принципы выше. Размер определяет точность: насколько оценка из выборки может отклоняться от значения по всему универсуму.

Из таблицы следуют три практических вывода.

Для непрерывных показателей — доля полки, число фейсингов, цена на полке — точность зависит ещё и от того, насколько сильно показатель различается между магазинами. Её оценивают по результатам первой волны и при необходимости корректируют размер выборки до второй.

Минимум и максимум точек на сеть

Частая ошибка — взять одинаковый процент от всех сетей, например 20%. Проблема видна на простом примере: в одном городе у сети А 20 магазинов, у сети Б — 500. Когда выборка составляет заметную часть всех магазинов сети, погрешность уменьшается: в формулу добавляется поправка на конечную совокупность √((N − n) / (N − 1)), где N — число магазинов сети в городе. Для небольшой сети это существенно, для крупной — почти нет.

Взвешивание: когда квоты не пропорциональны

Для сравнения сетей выборка строится с минимумами и максимумами, а не пропорционально числу магазинов. Поэтому итог по каналу или рынку взвешивается по структуре универсума.

Правило взвешивания фиксируется вместе с выборкой и не меняется между волнами — иначе динамика будет отражать смену весов.

Как построить выборку: восемь шагов

1. Определить задачу и универсум

Оценка исполнителя — выборка по территориям агентства; контроль промо — из адресной программы акции; общие показатели — репрезентативная выборка по рынку. Одна выборка на все задачи не работает: рыночную выборку нельзя привязать ни к конкретному мерчандайзеру, ни к магазинам, где идёт акция.

2. Проверить перечень точек

Нужна актуальная база с признаками сети, формата, региона и размера населённого пункта. В традиционной рознице за год может меняться до 15% точек. Если перечень не обновлялся, часть выборки придётся на закрытые магазины, поле сорвётся, а замены будут делаться на ходу и без правила.

3. Задать группы и рассчитать размер

Распределить выборку по сетям, форматам и стратам, задать допустимую погрешность для самого детального разреза, который будет обсуждаться на ревью, и от неё рассчитать минимум и максимум точек на сеть. Выводы по подгруппам из 10–15 точек без указания погрешности не делаются.

4. Отобрать точки случайно и утвердить правило замен

Список фиксируется до начала поля. Не берутся магазины по близости, по маршрутам мерчандайзеров или по списку от сети — смещение здесь гарантировано. Замены — только на сопоставимые точки.

5. Зафиксировать взвешивание

По числу точек или по продажам категории — и откуда взяты веса. Без взвешивания итог по рынку определяется тем, какая сеть получила больше точек.

6. Провести первую волну и проверить точность

Для непрерывных показателей — доли полки, фейсингов, цен — уточнить разброс и при необходимости скорректировать размер до второй волны.

7. Сохранять структуру между волнами

Магазины можно обновлять на сопоставимые, но число точек в каждой группе сохраняется. Если в одной волне в городе было 10 магазинов у дома сети, а в следующей 6, изменение показателя будет отражать изменение структуры, а не полки.

8. Описать выборку и подтвердить данные в отчёте

«200 точек» без описания перепроверить невозможно. В отчёте указываются задача и универсум, источник перечня и дата его актуальности, группы и квоты, правило отбора и замен, взвешивание, погрешность по каждому обсуждаемому разрезу и даты поля. Каждое наблюдение подтверждается фото с геометкой и временем визита; на платформе TopMission данные проходят многоэтапную проверку, и итоговая точность составляет 99%. Точность сбора и точность выборки — разные вещи, и в отчёте стоит показывать обе.