Формулировка вопросов в анкете: правила и типичные ошибки
Одно неудачное слово может изменить распределение ответов на десятки процентов. Собрали правила составления вопросов, которые помогают получить честные данные.
Анкета — это инструмент измерения, и, как любой инструмент, она может давать точные или искаженные показания. Даже при идеальной выборке и безупречном полевом этапе плохо сформулированные вопросы способны полностью обесценить результаты исследования. Люди отвечают не на то, что хотел спросить исследователь, а на то, что они поняли из формулировки.
В этой статье мы собрали основные правила составления вопросов и разобрали типичные ошибки, которые встречаются даже в профессиональных анкетах.
Простота и однозначность
Первое правило — вопрос должен быть понятен любому респонденту из целевой аудитории. Это значит, что в формулировке не должно быть профессиональных терминов, сложных оборотов и редких слов. Если без специального понятия не обойтись, его нужно объяснить простыми словами прямо в тексте вопроса.
Однозначность означает, что все респонденты понимают вопрос одинаково. Слова вроде «часто», «регулярно», «недавно» каждый трактует по-своему: для одного «часто» — это каждый день, для другого — раз в месяц. Вместо них лучше использовать конкретные временные интервалы и количественные варианты ответов.
Один вопрос — одна тема
Распространенная ошибка — так называемые двуствольные вопросы, в которых спрашивается о двух вещах одновременно. Например: «Насколько вы довольны качеством и скоростью обслуживания?» Респондент, довольный качеством, но недовольный скоростью, не может дать корректный ответ, а исследователь не поймет, к чему относится полученная оценка.
Решение простое — разделить такой вопрос на два отдельных. Анкета станет немного длиннее, но данные будут интерпретируемыми.
Нейтральность формулировок
Вопрос не должен подсказывать «правильный» ответ. Наводящие формулировки вроде «Согласны ли вы, что новый парк сделал район комфортнее?» подталкивают к согласию. Нейтральный вариант звучит иначе: «Как, по вашему мнению, изменилась комфортность района после открытия парка?» с вариантами ответа от «значительно улучшилась» до «значительно ухудшилась».
К наводящим относятся и вопросы, содержащие оценочные слова, ссылки на авторитеты или мнение большинства. Фраза «Многие эксперты считают…» в начале вопроса заметно сдвигает ответы в сторону согласия с этими экспертами.
Сбалансированные шкалы
Шкалы ответов должны быть симметричными: одинаковое число положительных и отрицательных вариантов, равные смысловые расстояния между соседними пунктами. Шкала «отлично — хорошо — удовлетворительно — плохо» несимметрична: три варианта из четырех скорее положительные, и это смещает результаты.
Отдельный вопрос — нужна ли нейтральная середина. Ее наличие позволяет честно ответить тем, у кого действительно нет определенного мнения, но иногда превращается в убежище для тех, кто не хочет задумываться. Решение зависит от темы и задачи исследования.
Исчерпывающие и непересекающиеся варианты
Список вариантов ответа должен покрывать все возможные ситуации. Если респондент не находит подходящего варианта, он выбирает наименее неподходящий, и данные искажаются. Поэтому в закрытые вопросы часто добавляют вариант «другое» с возможностью вписать свой ответ, а также «затрудняюсь ответить».
Варианты не должны пересекаться. Классическая ошибка — возрастные интервалы вида «18–25, 25–35, 35–45», где человек двадцати пяти лет может выбрать два варианта. Правильно: «18–24, 25–34, 35–44».
Вопросы о прошлом поведении
Люди плохо помнят детали своего поведения, особенно если речь идет о рутинных действиях за длительный период. Вопрос «Сколько раз за последний год вы покупали молоко?» практически гарантирует неточный ответ. Гораздо надежнее спрашивать о недавнем и конкретном периоде: «Покупали ли вы молоко за последние семь дней? Сколько раз?»
Еще один прием — привязка к запоминающимся событиям. Например, вместо абстрактного «за последние три месяца» можно указать «с начала лета», если опрос проводится осенью.
Чувствительные темы
Вопросы о доходе, здоровье, вредных привычках, политических взглядах требуют особого подхода. Респонденты склонны давать социально одобряемые ответы: занижать потребление алкоголя, завышать частоту занятий спортом. Чтобы снизить этот эффект, используют несколько приемов:
- размещение чувствительных вопросов ближе к концу анкеты, когда установлено доверие;
- использование интервалов вместо точных цифр, например для дохода;
- нормализация поведения в формулировке: «Некоторые люди… а как поступаете вы?»;
- самозаполнение анкеты без участия интервьюера;
- гарантии анонимности и разъяснение того, как будут использованы данные.
Порядок вопросов
Последовательность вопросов тоже влияет на ответы. Предыдущий вопрос создает контекст, в котором воспринимается следующий. Если сначала спросить о проблемах в работе общественного транспорта, а затем об общей удовлетворенности жизнью в городе, оценки последней окажутся ниже, чем при обратном порядке.
Общее правило — двигаться от общего к частному, от простого к сложному, от нейтрального к чувствительному. Вопросы, по которым нужно получить спонтанную реакцию, например спонтанное знание брендов, ставятся раньше тех, которые содержат подсказки.
Открытые и закрытые вопросы
Закрытые вопросы с готовыми вариантами удобны для обработки и сравнения, но ограничивают респондента рамками, заданными исследователем. Открытые вопросы позволяют услышать собственные слова людей и обнаружить неожиданные ответы, однако требуют трудоемкого кодирования.
Хорошая анкета сочетает оба типа: закрытые вопросы для ключевых показателей и несколько открытых — для понимания причин и поиска инсайтов. Важно не злоупотреблять открытыми вопросами: каждый из них увеличивает нагрузку на респондента и время интервью.
Длина анкеты
Чем длиннее анкета, тем ниже качество ответов в ее конце. Уставший респондент начинает отвечать механически, выбирать одинаковые варианты в табличных вопросах или прерывает интервью. Для телефонного опроса оптимальная длина — до пятнадцати минут, для онлайн-анкеты — до двадцати, для личного интервью можно немного больше.
Если вопросов слишком много, стоит пересмотреть их с точки зрения целей исследования. Часто выясняется, что часть пунктов включена по принципу «интересно было бы узнать» и не влияет на принимаемые решения.
Пилотирование
Даже опытный исследователь не может предусмотреть все сложности восприятия. Поэтому перед запуском анкету обязательно тестируют на небольшом числе респондентов из целевой аудитории. Полезно использовать метод когнитивного интервью: просить человека проговаривать вслух, как он понимает вопрос и почему выбирает тот или иной ответ.
Пилотирование выявляет непонятные формулировки, отсутствующие варианты ответа, логические ошибки в переходах и проблемы с длительностью. Исправить их до основного этапа гораздо дешевле, чем обнаружить после завершения полевых работ.
Итог
Составление анкеты — одновременно наука и ремесло. Правила помогают избежать грубых ошибок, но качество приходит с опытом и вниманием к деталям. Хорошая анкета незаметна для респондента: ему легко и понятно отвечать, а исследователь получает данные, которым можно доверять.
Команда NRay проведет исследование под вашу задачу: от брифа до отчета с рекомендациями. Напишите нам или посмотрите перечень услуг.