Вероятность и статистика · объяснение и практика
Почему большая выборка может оставаться смещённой
Почему большой опрос может плохо представлять совокупность: рамка отбора, добровольные ответы, пропуски и отличие случайной изменчивости от систематического смещения.

В теме Выборка и план исследования · Учебная карта
Главная мысль
Размер выборки не исправляет автоматически способ её отбора. Если некоторые группы исключены или отвечают с другими шансами, результат может систематически отличаться от всей совокупности. Сначала определите, кого хотят описать и кто действительно имел возможность попасть в наблюдения.
С кого начинается вывод о группе
Школа хочет узнать, какими учебными приложениями пользуются все ученики. Опрос размещён только в чате кружка программирования. Даже если ответит почти весь кружок, это не сделает его представителем всей школы. Участники кружка могут отличаться интересом к программам и доступом к устройствам. Число ответов относится к выбранной части совокупности, а вопрос поставлен о более широкой группе.
Сначала назовите генеральную совокупность: всех учеников определённых классов в указанное время. Затем опишите рамку отбора — список или канал, из которого выбирают участников. Если в ней отсутствуют другие ученики, увеличение активности внутри чата не возвращает пропущенные группы. Проблема находится в устройстве отбора, а не только в количестве заполненных анкет.
Чем смещение отличается от случайной изменчивости
При повторном случайном отборе одни и те же правила могут дать немного разные результаты из-за состава выборки. Это случайная изменчивость. Систематическое исключение определённой группы действует иначе: результаты повторяются с перекосом в одну сторону. Больше наблюдений при том же исключении может сделать оценку более устойчивой вокруг неправильного для всей совокупности уровня.
Добровольный ответ создаёт ещё один возможный отбор. Даже получив одинаковое приглашение, люди с сильным интересом к теме могут отвечать чаще. Поэтому нужно различать приглашённых, ответивших и тех, чьи ответы признаны действительными. Доля ответов и сведения о пропусках помогают читателю понять, какой именно набор данных поддерживает вывод.
Пример
Опрос только кружка программирования описывает ответивших участников кружка; без дополнительного обоснования он не описывает всех учеников школы.
Увеличение числа ответов внутри того же ограниченного канала не устраняет отсутствие других групп в рамке отбора.
Какие улучшения относятся к самому плану
Вероятностный отбор из полного подходящего списка даёт контролируемые шансы включения и основу для оценки неопределённости. Можно также заранее выделить важные группы и использовать согласованный план отбора с весами. Не каждая корректная схема требует одинаковой доли из всех групп, но способ выбора и обработки должен быть описан, а не придуман после просмотра результата.
Случайный отбор не гарантирует идеального состава любой одной маленькой выборки. Он снижает определённые систематические проблемы при выполнении своих условий и позволяет исследовать случайную погрешность. Ошибки формулировки вопроса, неверные записи и отказ от ответа всё равно могут оставаться. Поэтому одно слово «случайная» не заменяет проверки всего исследования.
Если данные уже собраны удобным способом, честно ограничьте вывод той группой, которую они действительно описывают. Не нужно скрывать полезный локальный результат, но нельзя расширять его на всех только из-за большого числа строк. Сохраните вопрос, даты, способ приглашения и объём ответов: эти сведения важны для интерпретации не меньше одного итогового процента.
От чтения к действию
А теперь — вы
Частые вопросы
Большая выборка всегда лучше маленькой?
При сопоставимом корректном плане больше данных может уменьшать случайную неопределённость. Но систематический перекос отбора сам по себе размером не устраняется.
Случайная выборка гарантирует точное совпадение с совокупностью?
Нет. Она всё равно имеет случайную изменчивость. Её преимущество связано с контролируемым планом и возможностью оценивать неопределённость.
Источники и работа с материалом
Объяснение, примеры и вопросы написаны для erudeet. Факты и определения сверены по источникам ниже; это ссылки для самостоятельной проверки.
Продолжить разбираться
Почему частота опыта не обязана совпадать с вероятностью
Как различать модельную вероятность и относительную частоту наблюдений, почему короткая серия не обязана быть сбалансированной и что проверять перед выводом о модели.
Открыть темуПочему совместное изменение не доказывает причину
Как отделить совместное изменение показателей от причинного вывода: скрытые факторы, обратное направление связи и роль продуманного исследования.
Открыть тему