Вероятность и статистика · объяснение и практика

Когда сравнение последовательностей требует учесть остаточное действие

Почему одинаковые участники и чередование двух условий не устраняют влияние периода и предыдущего опыта, как эти компоненты меняют парное сравнение.

Рука ставит оранжевый столбик между двумя синими столбиками разной высоты.

В теме Выборка и план исследования · Учебная карта

В маршруте Вычислительные и планируемые эксперименты · 10 тем

Главная мысль

В перекрёстном плане участники проходят условия в разных последовательностях. Парность убирает постоянные различия участников, но не автоматически эффект периода или остаточное влияние предыдущего условия. Их нужно предусмотреть в модели и организации опыта.

Второй период содержит больше одного возможного влияния

Сравним два учебных интерфейса А и Б на тех же участниках. В последовательности АБ сначала используется А, затем Б; в БА порядок обратный. Преимущество парности в том, что постоянный индивидуальный уровень можно исключить вычитанием результатов одного человека. Однако ко второму периоду участник уже имеет опыт первого.

Отделим три компонента: прямое влияние текущего интерфейса, общий эффект второго периода и остаточный эффект ранее использованного интерфейса. Общая тренировка между периодами не равна специфическому следу А. Если А учит навыку, который затем помогает и в Б, простая пауза не обязана стереть этот навык. Равный состав участников сам по себе проблему не решает.

Баланс порядка не убирает разный остаточный эффект

В детерминированной учебной модели исходный уровень равен десяти, прямой эффект А равен двум, Б — нулю. Второй период добавляет единицу. Остаточный эффект А добавляет ещё три, остаточного эффекта Б нет. Для АБ получим 12, затем 14: наблюдаемая разность А −Б равна −2. Для БА получим 10, затем 13: разность А −Б равна 3.

Среднее этих двух ориентированных разностей равно 0,5, хотя прямой эффект А −Б равен двум. Общий периодический сдвиг при равном балансе порядков сократился, но разный перенос предыдущего условия остался. Если оба остаточных эффекта были бы нулевыми, разности составили бы 1 и 3, среднее — правильные два. Это проверка указанной модели, а не обещание для любого малого исследования.

Пример

Почему отрицательная разность в последовательности АБ не доказывает превосходство Б?

Во втором результате смешаны текущее Б, общий период и сохранённое влияние А. Наблюдаемая разность не изолирует прямой эффект интерфейса.

Условия плана важнее удобства парного теста

Порядок обычно назначают случайно, предусматривают подходящие интервалы и обосновывают, почему остаточное влияние достаточно исчезло или может быть оценено. Для необратимых эффектов перекрёстный дизайн может не соответствовать задаче. В обучении это особенно заметно: приобретённый навык часто сохраняется и не возвращает человека к исходному состоянию.

Нельзя сначала выбрать удобный анализ по результату проверки переноса и скрыть остальные периоды. Такое решение тоже зависит от данных и может вносить смещение. Заранее описывают последовательности, измерения, эффекты периода и план анализа. Парный тест отвечает только на согласованную модель различий; он не разделяет автоматически все возможные причины изменения результата.

От чтения к действию

А теперь — вы

Использование А в первом периоде добавляет три единицы к результату второго периода независимо от того, какое условие действует сейчас. Как назвать этот компонент?

Частые вопросы

Эффект периода и перенос — одно и то же?

Нет. Эффект периода может действовать независимо от прежнего условия, тогда как перенос связан именно с тем, что использовалось раньше.

Всегда ли помогает перерыв между условиями?

Только если он действительно устраняет существенный перенос. Для сохраняющегося навыка или необратимого изменения это нельзя предполагать автоматически.

Источники и работа с материалом

Объяснение, примеры и вопросы написаны для erudeet. Факты и определения сверены по источникам ниже; это ссылки для самостоятельной проверки.

Продолжить разбираться