Прислать анонс
Исследования

Маркетинговый опрос: виды, методы и как не испортить данные на старте

Чем опрос отличается от исследования поведения, сколько нужно ответов для достоверного вывода, как составить анкету и какие ошибки делают результаты бесполезными.

· обновлено

Опрос — самый доступный способ получить данные о клиентах: анкету можно собрать за час и разослать в тот же день. Из-за этой доступности его же чаще всего и портят. Данные приходят, отчёт рисуется, решения принимаются — а через полгода выясняется, что выборка была кривая, а половина вопросов подсказывала ответ.

Разберём, что опросом можно узнать, что нельзя, и как устроена анкета, которой можно верить.

Что опрос на самом деле измеряет

Опрос фиксирует заявленное, а не реальное поведение

Человек отвечает не то, что он делает, а то, что он о себе думает и что считает приличным сказать. Классический разрыв: «готовы ли вы платить за эту функцию» даёт 60% «да» и 3% реальных оплат. Поэтому намерения из опроса — гипотеза, а не прогноз. Проверять их нужно поведением: тестом, предзаказом, живыми деньгами.

Зато опрос отлично отвечает на вопросы другого типа: что человек уже сделал и помнит, как он выбирал, что ему мешало, какими словами он описывает свою задачу. Последнее — недооценённая ценность: формулировки респондентов потом становятся заголовками на сайте, и работают лучше придуманных.

Виды опросов

Разделять их удобнее не по формату, а по тому, на каком этапе вы находитесь.

ЗадачаЧто делаемЧто на выходе
Понять, что вообще происходитОткрытые вопросы, интервью, немного респондентовСписок гипотез и живой язык клиентов
Измерить, насколько это массовоЗакрытые вопросы, большая выборкаДоли и цифры, на которые можно опереться
Отследить динамикуОдинаковая анкета через равные периодыТренд: стало лучше или хуже
Оценить конкретный контактКороткий вопрос сразу после событияОценка покупки, поддержки, доставки

Порядок здесь важен: количественный опрос до качественного — это измерение вариантов ответа, которые вы придумали сами. Если в списке нет реальной причины отказа, вы её и не увидите — она уйдёт в «другое».

Сколько нужно ответов

≈400ответов дают погрешность около ±5% при доверии 95%
≈1000нужно, чтобы сузить погрешность до ±3%
5–15интервью хватает, чтобы перестать слышать новое
Размер вашей базы почти не влияет: для 50 тысяч клиентов и для 5 миллионов нужна примерно одинаковая выборка.

Это то, что удивляет чаще всего: точность зависит от размера выборки, а не от доли охваченной аудитории. Опросить 400 человек из 50 тысяч — нормально. Опросить 400 человек из 500 — тоже нормально, только погрешность будет заметно меньше.

Куда важнее числа то, кто попал в выборку. Если анкету увидели только подписчики рассылки, вы измерили лояльных, а не клиентов. Если её прошли только те, у кого была свободная минута, — вы измерили незанятых. Этот перекос не лечится количеством ответов: тысяча ответов от одной и той же группы остаётся мнением одной группы.

Как собрать анкету

  1. Сформулировать решениеНе «изучить аудиторию», а «понять, снимать ли ограничение на бесплатном тарифе». Вопросы выводятся из решения.
  2. Написать гипотезыЧто вы ожидаете увидеть. Если любой результат вас устроит, опрос не нужен.
  3. Собрать вопросыКаждый должен работать на гипотезу. Вопросы «на всякий случай» удлиняют анкету и снижают доходимость.
  4. Прогнать пилот10–15 человек. Ищем не ответы, а места, где вопрос понимают не так, как вы задумали.
  5. Запустить и следитьСмотрите, на каком вопросе люди бросают анкету, — это и есть список проблемных формулировок.

Пилот пропускают почти всегда, а он окупается сильнее остальных шагов: половина проблем анкеты видна на десяти людях и не видна ни на одном совещании.

Ошибки, которые убивают данные

Наводящий вопрос

«Насколько вам понравился наш удобный интерфейс?» Оценка уже подсказана. Нейтрально: «Как вы оцените интерфейс?»

Двойной вопрос

«Довольны ли вы скоростью и поддержкой?» Ответ невозможно интерпретировать. Разделяйте на два.

Кривая шкала

Варианты «отлично, хорошо, нормально, приемлемо, плохо» смещены в плюс. Шкала должна быть симметричной.

Вопрос о будущем

«Будете ли вы пользоваться?» — гадание. Спрашивайте о прошлом: «Пользовались ли за последний месяц?»

Обязательные поля везде

Человек, у которого нет мнения, выберет случайный вариант, лишь бы пройти дальше. Это шум в чистом виде.

Опрос без действия

Данные собрали, отчёт сделали, ничего не поменяли. Следующий опрос эти же люди проходить не станут.

Что делать с результатами

Считать не только средние. Среднее по шкале удовлетворённости скрывает главное: 4,0 может быть «всем нормально», а может — «половина в восторге, половина в ярости». Смотрите распределение, а не одну цифру.

Открытые ответы читать целиком, а не только в виде облака слов. Самые полезные вещи в опросе — это две-три реплики, которые объясняют, почему цифры выглядят именно так.

И проверяйте выводы поведением. Опрос показывает, где копать; подтверждает гипотезу уже эксперимент — тест, изменение на сайте, реальный заказ.

Коротко

Опрос — дешёвый способ получить гипотезы и язык клиентов, но плохой способ предсказать поведение. Достоверность даёт не размер базы, а честная выборка: около 400 ответов достаточно почти для любой аудитории, если это не одни и те же лояльные подписчики. Анкету стоит выводить из решения, которое вы собираетесь принять, обкатывать на десяти людях до запуска и не задавать вопросов о будущем. А результаты смотреть распределением, а не средним, — и обязательно что-то по ним менять, иначе следующий опрос никто не пройдёт.

Читайте ещё