26. Источники и контроль ненадежности данных.

В контексте статистического оценивания достоверности эмпирических результатов вводится понятие надежности данных. Надежными считаются данные, которые при повторном их получении в тех же процедурных условиях дают незначимые отклонения от первоначальных величин. В этом случае надежность связывается не просто со стабильностью тех или иных эффектов, а также с требованием их вероятностной оценки на основе статистических решений. Ненадежность данных психологического исследования может быть следствием множества причин: колебания самих измеряемых переменных, ошибки измерения, влияния побочных факторов, обеспечивающих несистематические сдвиги в фиксируемых показателях, и т.д. Эта угроза выводу об установленной зависимости контролируется путем увеличения количества проб.

Одно из следствий таких нерегулярных влияний ПП – ненадежность данных, т.е. при другом разбросе уровней ПП – по пробам в течение времени – устанавливается другая связь значений ЗП с уровнями НП. Обычно эта угроза выводу об экспериментальной зависимости контролируется в двух противоположных направлениях. С одной стороны, экспериментатор стремится свести число проб в общей экспериментальной последовательности к минимуму, чтобы провести индивидуальный эксперимент в как можно более сжатые сроки, нивелируя фактор времени. С другой стороны, экспериментатор должен обеспечить достаточно большое число проб, т.е. постараться приблизиться к бесконечному эксперименту, чтобы все смешения с колебаниями со стороны ПП случайно – и в этом смысле поровну – распределились между уровнями НП. Аналогично обстоят дела и с контролем фактора задач. Воспроизводимость результатов – тот критерий, который позволит оценить результаты как достаточно надежные.

Есть и другие источники ненадежности данных. Так, может иметь место вариабельность самой НП, когда экспериментатор считает пробы отнесенными к одному и тому же уровню, а на самом деле в одной или части из них произошло что-то, что не позволяет считать условия идентичными. На примере физических стимулов можно предполагать колебания напряжения в сети; на примере принятия испытуемыми проблемных ситуаций – изменения их субъективного понимания или личностного принятия проблемы и т.д. О фоновых изменениях измеряемых показателей уже было сказано. Рассмотрим надежность методик измерения.

Ошибки измерения могут быть связаны как с субъектом, проводящим его, так и с устройством прибора или построением психологической методики. Ненадежность психодиагностических средств, включенных в экспериментальную схему сравнений, приведет к тому, что ненадежным будет и полученный экспериментальный результат. Эти источники ошибок, приводящие к смешениям и тем самым к артефактным результатам, уже не связаны с фактором времени. Количеством проб контролируется, таким образом, не только возможность несистематической изменчивости, т.е. первый из источников смешений, связанных с фактором времени.

27. Систематические смешения, формы их контроля.

Систематические смешения – основной вид угроз внутренней валидности. Такое смешение возникает, когда один из уровней НП неразрывно связан с активным уровнем какой-то другой переменной (ПП). Например, если испытуемый знает, в чем заключается различие между пробами, то, оказавшись в условиях одной из них, он может стремиться быть более активным или более осторожным. Однако дело не только в мотивационном факторе.

Если эксперимент многодневный и в каждый из дней испытуемый проходит только по двум пробам, то может оказаться, что при получении второй из них он всегда будет более уставшим. В таком случае, если пробы чередуются регулярно – каждый день в последовательности АБ, уровень Б оказывается систематически смешанным с фактором времени (большей усталостью испытуемого).

Отдельная проблема – неидентичность влияния предшествующей пробы на последующую. Симметричным эффектом последовательности называется такое влияние предыдущего условия на последующее, когда эффект влияния этой производной ПП (последовательность условий) остается постоянным при изменении направленности переходов между уровнями экспериментального фактора – от А к Б и от Б к А. Асимметричным называют такой эффект, когда влияние последовательности уровней НП (А на Б и Б на А) меняет направленность или вид эффекта. Так, переход из темного в освещенное помещение вызовет иной эффект (адаптации), чем из более светлого в темное.

Основные интраиндивидуальные схемы направлены на решение проблем контроля как систематических, так и несистематических смешений. Случайная последовательность. Она предполагает случайное распределение уровней экспериментального фактора в общей последовательности проб, ограниченной числом п, которое в свою очередь связано с предполагаемой величиной экспериментального различия и возможностью допустимых смешений с фактором времени (какое время занимает проба и как долго может длиться эксперимент без существенных фоновых колебаний ЗП и состояний человека).

Схема регулярного чередования выглядит как повторяемость одних и тех же условий в неизменном порядке: АБАБАБ. Она оправданна, если каждое из условий проводится в разные дни; тогда можно не бояться влияния порядка проб. Если исследователь не знает, сможет ли он реализовать задуманное число проб, то такая последовательность позволяет устанавливать экспериментальный эффект и в том случае, если эксперимент был прерван.

Схема позиционного уравнивания. когда экспериментальных проб немного, а изменения, связанные с фактором времени, имеют линейный характер. Эта схема, как и все предыдущие, является схемой контроля угроз внутренней валидности со стороны и фактора времени, и фактора задач, и фактора последовательности проб. Выбранная для контроля последовательности условий НП схема АББА включает также возможность попарного уравнивания задач: главное, чтобы в каждой микропоследовательности условий А и Б задачи оказались равными по типу и трудности, а в следующей микропоследовательности уровень фактора задач может быть иным.