Выборка в социологии простыми словами
Почему опрос тысячи человек позволяет судить о мнении миллионов, чем вероятностная выборка отличается от квотной и как оценить надежность результата.
Самый частый скептический вопрос о социологических опросах звучит так: как можно судить о мнении целого города, опросив всего тысячу человек? Меня же никто не спрашивал! Ответ кроется в теории выборки — одном из самых важных и одновременно наименее понятных широкой публике разделов социологии. Попробуем объяснить его простыми словами.
Аналогия с супом
Лучшее объяснение принципа выборки — аналогия с приготовлением супа. Чтобы узнать, достаточно ли соли, повару не нужно съесть всю кастрюлю: достаточно хорошо перемешать суп и попробовать одну ложку. Если суп перемешан, ложка содержит все ингредиенты в тех же пропорциях, что и вся кастрюля.
В социологии «перемешивание» обеспечивается случайным отбором. Если каждый житель города имеет равный шанс попасть в выборку, то опрошенные люди будут похожи на все население по возрасту, полу, взглядам и другим характеристикам. И чем больше ложка — то есть выборка, — тем точнее оценка.
Генеральная совокупность и выборка
Генеральная совокупность — это все люди, о которых мы хотим что-то узнать. Например, все жители города старше восемнадцати лет. Выборка — та часть генеральной совокупности, которую мы реально опрашиваем. Задача исследователя — построить выборку так, чтобы результаты, полученные на ней, можно было с известной точностью перенести на генеральную совокупность.
Важно правильно определить генеральную совокупность. Если опрос проводится только среди пользователей определенного сайта, его результаты относятся к этим пользователям, а не ко всему населению, сколько бы тысяч анкет ни было собрано.
Вероятностная выборка
Вероятностная выборка — та, в которой каждый элемент генеральной совокупности имеет известную и ненулевую вероятность быть отобранным. Именно для таких выборок теория позволяет строго рассчитать погрешность.
Существует несколько видов вероятностных выборок:
- простая случайная — все элементы имеют равные шансы, как в лотерее;
- систематическая — отбирается каждый энный элемент из списка;
- стратифицированная — совокупность делится на группы, и внутри каждой проводится случайный отбор;
- кластерная — случайно отбираются группы, например дома или классы, и опрашиваются все или часть их членов;
- многоступенчатая — сочетание нескольких этапов отбора.
На практике чаще всего используются многоступенчатые стратифицированные выборки, которые сочетают точность и экономичность.
Квотная выборка
Квотная выборка — неслучайный метод, при котором исследователь заранее задает, сколько респондентов с определенными характеристиками нужно опросить, например столько-то мужчин и женщин разных возрастов. Интервьюеры набирают людей до заполнения квот.
Квотные выборки дешевле и проще в реализации, поэтому широко применяются в маркетинговых исследованиях и онлайн-опросах. Их недостаток в том, что внутри квот отбор не случаен, и формально рассчитать погрешность нельзя. На практике при хорошо продуманных квотах результаты обычно близки к вероятностным выборкам, но риск систематического смещения выше.
Погрешность выборки
Погрешность показывает, насколько результат опроса может отличаться от истинного значения в генеральной совокупности. Если опрос показал, что сорок процентов жителей поддерживают определенную инициативу, а погрешность составляет три процентных пункта, это означает, что истинное значение с высокой вероятностью находится в диапазоне от тридцати семи до сорока трех процентов.
Погрешность зависит от размера выборки: чем она больше, тем погрешность меньше. Но зависимость нелинейная. Чтобы уменьшить погрешность вдвое, выборку нужно увеличить в четыре раза. Поэтому после определенного порога дальнейшее увеличение выборки становится неэффективным.
Почему размер населения почти не важен
Удивительный, но математически строгий факт: при больших генеральных совокупностях точность выборки практически не зависит от их размера. Выборка в тысячу человек дает примерно одинаковую погрешность для города с населением в сто тысяч и для страны с населением в сто миллионов. Вернемся к супу: чтобы оценить соленость, одна ложка одинаково информативна и для маленькой кастрюли, и для большого котла — при условии, что суп хорошо перемешан.
Не только погрешность выборки
Важно понимать, что статистическая погрешность — не единственный источник неточности опроса. Существуют и другие ошибки: неполнота основы выборки, когда часть генеральной совокупности недоступна; отказы от участия; неточные ответы из-за плохих формулировок; ошибки интервьюеров и обработки. Эти ошибки не уменьшаются с ростом выборки и требуют методической работы на всех этапах исследования.
Поэтому опрос с выборкой в десять тысяч человек, собранных на одном сайте, может оказаться гораздо менее точным, чем аккуратный вероятностный опрос тысячи человек.
Взвешивание
Даже при тщательном построении выборки ее структура может несколько отличаться от структуры генеральной совокупности, например из-за разной готовности отвечать у разных групп. Чтобы скорректировать эти отклонения, применяется взвешивание: ответам недопредставленных групп придается больший вес, перепредставленных — меньший.
Взвешивание — мощный инструмент, но его нужно применять аккуратно. Слишком большие веса увеличивают эффективную погрешность, а взвешивание не может исправить смещение по признакам, которые не учтены в процедуре.
Подгруппы
Часто нас интересуют не только результаты по всей выборке, но и по отдельным группам: мужчинам и женщинам, молодежи и пенсионерам, жителям разных районов. Погрешность для подгрупп больше, чем для выборки в целом, потому что они меньше по размеру. Если в подгруппе всего сто человек, погрешность составит около десяти процентных пунктов, и различия между группами меньше этой величины нельзя считать надежными.
Поэтому при планировании исследования важно заранее определить, какие подгруппы нужно анализировать, и предусмотреть достаточный размер выборки для каждой из них.
Онлайн-панели и вопрос репрезентативности
Сегодня большая часть маркетинговых опросов проводится через онлайн-панели — базы людей, заранее согласившихся участвовать в исследованиях. Такие выборки удобны и быстры, но формально не являются вероятностными: в панель попадают те, кто сам на нее подписался. Панелисты в среднем активнее пользуются интернетом и могут отличаться от населения по ряду характеристик.
Для многих задач, особенно когда целевая аудитория активно присутствует в сети, онлайн-панели дают вполне надежные результаты. Но если речь идет об оценке показателей для всего населения, включая старшие возрастные группы, стоит дополнять их другими методами или применять продуманное взвешивание.
Итог
Выборка — основа любого количественного исследования. Правильно построенная, она позволяет с высокой точностью судить о мнениях и поведении больших групп людей по ответам относительно небольшого числа респондентов. А то, что вас лично никогда не опрашивали, — совершенно нормально: вероятность попасть в конкретную выборку очень мала, и это вовсе не мешает ей быть репрезентативной.
Команда NRay проведет исследование под вашу задачу: от брифа до отчета с рекомендациями. Напишите нам или посмотрите перечень услуг.