Связь, причина и отбор: читать схему исследования
Различать общую причину, посредник и отбор · Планировать сравнение под причинный вопрос
В этом занятии
- Различать общую причину, посредник и отбор
- Планировать сравнение под причинный вопрос
- Сохранять границы вывода о вмешательстве
Пригодится: Рекомендуем сначала изучить «Изменение во времени: возраст, опыт и повторная проверка».
Разберёмся перед практикой+
Связь, причина и отбор: читать схему исследования
Причинный вопрос спрашивает, что изменилось бы при другом воздействии в сопоставимых условиях. Если участники, использующие подсказки, чаще ошибаются, это не означает, что подсказки создают ошибки: более трудные задания или меньший исходный опыт могли повышать и потребность в подсказках, и число ошибок. Наблюдаемая связь — исходная информация для анализа, а не готовый ответ на вопрос о пользе вмешательства.
Общая причина влияет на оба сравниваемых показателя. На схеме её изображают двумя стрелками от одного фактора к двум другим. Например, сложность задачи может повышать время решения и число запросов помощи. Если интересует влияние помощи, нужно учитывать, как сложность распределилась между условиями. Просто добавить больше строк в таблицу не устранит это смешение; важны дизайн и содержательные основания для выбранного сравнения.
Посредник находится на предполагаемом пути воздействия. Видимый план может уменьшать необходимость удерживать шаги, а это — сокращать пропуски. Если исследователь статистически фиксирует нагрузку на удержание, он меняет вопрос: оценивает не обязательно весь эффект плана, а иной компонент при дополнительных допущениях. Поэтому правило «контролировать как можно больше переменных» неверно. Сначала нужно определить, какое отношение интересует и где переменная расположена в причинной модели.
Отбор по общему следствию способен создавать связь, которой не было в исходной совокупности. Представим конкурс, где допускают либо за высокий навык рисования, либо за высокий навык программирования. Среди допущенных слабость одного навыка чаще должна компенсироваться другим. Отрицательная связь в отобранной группе не доказывает природного конфликта навыков. Само условие попадания в группу изменило наблюдаемую структуру данных.
Рандомизированное распределение по условиям помогает разорвать систематическую связь назначения воздействия с исходными особенностями. Но оно не гарантирует полного баланса в каждом маленьком наборе, одинакового соблюдения процедуры или отсутствия потерь участников. Следует различать эффект назначения условия и эффект фактического использования инструмента. Если после распределения анализировать только выбравших удобный вариант, можно снова ввести отбор и потерять преимущество рандомизации.
Наблюдательные исследования также могут отвечать на причинные вопросы, если их допущения ясно сформулированы и достаточно правдоподобны. Нужны временной порядок, подходящие сравнения, сведения о смешивающих факторах и проверка чувствительности вывода к неполным данным. Причинная схема помогает сделать эти предположения видимыми. Она не подтверждает свои стрелки автоматически: направления и отсутствие связей требуют теории и предметного знания.
В дифференциальной психологии особенно важен вопрос неодинакового эффекта. Если средняя польза инструкции мала, она могла существенно помогать новичкам и почти не менять выполнение опытных участников. Однако поиск множества подгрупп после просмотра результатов способен порождать случайные красивые истории. Лучше заранее определить содержательно обоснованный признак различия, обеспечить достаточную точность и затем проверить, воспроизводится ли предполагаемое взаимодействие в новых данных.
Практическое решение обычно сочетает оценку эффекта, неопределённость, затраты и обратимость изменения. Небольшой безопасный эксперимент с понятным исходом может дать больше, чем крупный опрос о причинах ошибок. При этом результаты применимы к конкретной процедуре, участникам и периоду. Полезная причинная оценка не обязана объяснять всю личность: достаточно ясно показать, какое изменение помогает какой задаче и при каких проверенных условиях.
В вымышленном клубе в команду принимают тех, кто набрал не менее 8 по рисованию или не менее 8 по программированию. А имеет 9 и 3, Б — 3 и 9, В — 9 и 9; участник Г с 3 и 3 не принят. Среди принятых возникает зависимость, связанная с правилом отбора. На основании этой группы нельзя утверждать, что развитие рисования ухудшает программирование. Для такого причинного вопроса понадобился бы иной дизайн с наблюдением изменений.
- Сначала записываем правило включения: достаточно высокой оценки хотя бы по одному направлению.
- Проверяем, какие сочетания правило исключило, и видим отсутствие случая низких значений по обоим.
- Разделяем структуру отобранной группы и утверждение о том, как обучение одному навыку изменяет другой.
Попробуй самостоятельно
Запиши рассуждения в черновик или сделай построение на бумаге. Эти задания для самостоятельной работы: автоматической проверки и XP за них пока нет.
- Нарисуй словами две конкурирующие схемы связи запросов помощи и ошибок: помощь как причина и сложность как общая причина. Придумай безопасное сравнение, которое различало бы объяснения.
- Для вымышленного улучшения инструкции заранее укажи основной результат, один вероятный посредник и одну группу, где эффект может отличаться. Объясни, зачем объявлять их до анализа.
Источники и дальнейшее чтение
Материал изложен своими словами. Здесь можно проверить научные основания и подробнее изучить тему; часть источников — на английском.
Читай и разбирай пример в своём темпе. К практике можно перейти, когда будешь готов.