Корреляция, смешение и направление связи
Читать связь без автоматического причинного вывода · Строить альтернативную причинную схему
В этом занятии
- Читать связь без автоматического причинного вывода
- Строить альтернативную причинную схему
- Проверять сравнения внутри сопоставимых условий
Пригодится: Рекомендуем сначала пройти «Эксперимент: сравнение и случайное распределение».
Разберёмся перед практикой+
Корреляция, смешение и направление связи
Корреляция описывает совместное изменение переменных. При положительной связи большие значения одной чаще сопровождаются большими значениями другой; при отрицательной — меньшими. Знак связи не говорит, полезен ли результат, и не указывает, какая переменная вызывает другую.
Если в вымышленном журнале больше обращений к справке связано с большим числом ошибок, возможны разные объяснения. Справка может отвлекать; ошибки могут побуждать открыть справку; сложность задания может увеличивать и ошибки, и обращения. Одного совместного изменения недостаточно для выбора версии.
Смешивающий фактор связан и с изучаемым воздействием, и с результатом так, что искажает сравнение. Для задачи о справке это может быть исходная сложность. Важно указывать конкретный путь влияния: слово «третий фактор» без объяснения связи ещё не решает проблему.
Сравнение внутри уровней сложности может дать иную картину, чем общий итог. Если справку чаще используют на трудных задачах, группа пользователей справки в среднем получает более тяжёлые условия. Поэтому сырое сравнение их ошибок с остальными может быть несправедливым.
Наблюдательные данные иногда позволяют обоснованное причинное исследование при сильном дизайне и явных допущениях. Но механическое добавление всех столбцов в расчёт не гарантирует устранения смешения. Часть причин может быть не измерена; некоторые переменные являются уже следствием воздействия.
Ошибка — превращать фразу «корреляция не доказывает причинность» в запрет на изучение связей. Связь может помочь описать явление, предсказать результат или сформулировать новый эксперимент. Нужно назвать цель анализа и не приписывать ему возможностей, которых дизайн не обеспечивает.
В вымышленных данных на лёгких задачах справку использовали 2 из 10, на трудных — 8 из 10. Трудные задачи чаще завершались ошибкой. Почему общая связь справки и ошибок неоднозначна?
- Сложность связана с выбором справки: 20 процентов против 80 процентов.
- Сложность также связана с вероятностью ошибки.
- Получаем альтернативный путь: сложность влияет и на справку, и на ошибки.
- Нужны сопоставимые условия или плановое назначение справки; общий итог сам по себе не доказывает её вред.
Открываем учебную модель…
Попробуй самостоятельно
Запиши рассуждения в черновик или сделай построение на бумаге. Эти задания для самостоятельной работы: автоматической проверки и XP за них пока нет.
- Нарисуйте три причинные схемы для вымышленной связи числа подсказок и ошибок: прямую, обратную и с общей причиной. У каждой подпишите недостающие данные.
- Придумайте две группы задач с разной сложностью и разной частотой подсказок. Объясните, почему сравнение общих средних скрывает устройство данных.
Источники и дальнейшее чтение
Материал изложен своими словами. Здесь можно проверить научные основания и подробнее изучить тему; часть источников — на английском.
Читай и разбирай пример в своём темпе. К практике можно перейти, когда будешь готов.