8. Психометрические требования к диагностическим методикам

Для уверенности в достоверности результатов психодиагностических исследований необходимо, чтобы используемые психодиагностические методы были научно обоснованы, т. е. отвечали ряду требований. Такими требованиями являются. Валидность – “полноценность”, “пригодность”, “соответствие”. Есть несколько разновидностей валидности. Валидность теоретическая – определяется по соответствию показателей исследуемого качества, получаемых с помощью данной методики, показателям, получаемым с помощью других методик. Теоретическую валидность проверяют по корреляциям показателей одного и того же свойства, получаемым при помощи различных методик, опирающихся или исходящих из одной и той же теории. Валидность эмпирическая – проверяется по соответствию диагностических показателей реальному поведению, наблюдаемым действиям и реакциям испытуемого. По критерию эмпирической валидности методику проверяют путем сравнения ее показателей с реальным жизненным поведением людей. Валидность внутренняя - означает соответствие содержащихся в методике заданий, субтестов, суждений и т. п. общей цели и замыслу методики в целом. Она считается внутренне не валидной, когда все или часть вопросов, заданий или субтестов измеряют не то, что требуется от данной методики. Валидность внешняя – примерно то же, что и эмпирическая валидность, но тут речь идет о связи между показателями методики и наиболее важными внешними признаками, относящимися к поведению испытуемого. Валидность методики проверяется и уточняется в процессе ее достаточно длительного использования. Критерии валидности: Поведенческие показатели – реакции, действия и поступки испытуемого в разных жизненных ситуациях. Достижения испытуемого в различных видах деятельности: учебной, трудовой, творческой и др. Данные о выполнении различных контрольных проб и заданий. Данные, полученные от других методик, валидность которых или связь с данной методикой считаются достоверно установленными. Надежность – характеризует возможность получения с помощью данной методики устойчивых показателей. Надежность психодиагностической методики можно установить двумя способами: путем сравнения результатов, получаемых по этой методике разными людьми путем сравнения результатов, получаемых по одной и той же методике в различных условиях. Однозначность методики – характеризуется тем, в какой степени получаемые с ее помощью данные отражают изменения именно и только того свойства, для оценки которого данная методика применяется. Точность – отражает способность методики тонко реагировать на малейшие изменения оцениваемого свойства, происходящие в ходе психодиагностического эксперимента. Чем точнее психодиагностическая методика, тем тоньше с ее помощью можно оценивать градации и выявлять оттенки измеряемого качества, хотя в практической психодиагностике не всегда требуется очень высокая степень точности оценок.

9. Понятие надежности. Способы определения надежности

Надёжность методики – это критерий, который говорит о точности психологических измерений, то есть позволяет судить о том, насколько внушают доверие полученные результаты.

Это согласованность результатов тестирования испытуемых в разные моменты времени, при первичном и вторичном тестировании и с использованием разных по эквивалентности, по содержанию заданий. Надежность характеризует тесты свойств, но не состояний. Свойства:

- Воспроизводимость результатов исследования.

- Точность измерения.

- Устойчивость результатов.

Степень надёжности методик зависит от многих причин. Среди негативных факторов наиболее часто называются следующие:

нестабильность диагностируемого свойства;

несовершенство диагностических методик (небрежно составлена инструкция, задания по своему характеру разнородны, нечётко сформулированы указания по предъявлению методики испытуемым и т.д.);

меняющаяся ситуация обследования (разное время дня, когда проводятся эксперименты, разная освещённость помещения, наличие или отсутствие посторонних шумов и т.д.);

различия в манере поведения экспериментатора (от опыта к опыту по-разному предъявляет инструкции, по-разному стимулирует выполнение заданий и т.д.);

колебания в функциональном состоянии испытуемого (в одном эксперименте отмечается хорошее самочувствие, в другом – утомление и т.д.);

элементы субъективности в способах оценки и интерпретации результатов (когда ведётся протоколирование ответов испытуемых, оценивают ответы по степени полноты, оригинальности и т.д.).

Одним из важнейших средств повышения надежности методики является единообразие процедуры обследования, его строгая регламентация: одинаковая обстановка, однотипный характер инструкций, одинаковые для всех временные ограничения, способы и особенности контакта с испытуемыми и так далее.

На характеристику надёжности методик большое влияние оказывает исследуемая выборка. Она может, как снижать, так и завышать этот показатель, например, надежность, может быть искусственно завышена, если в выборке небольшой разброс результатов, т.е. если результаты по своим значениям близки друг к другу. Поэтому в руководстве обычно делается описание выборки, на котором определялась надёжность методики.

В настоящее время надежность все чаще определяется на наиболее однородных выборках, т.е. на выборках, схожих по полу, возрасту, уровню образования, профессиональной подготовке и т.п.

Разновидностей надёжности методик так же много, как и условий, влияющих на результаты диагностических испытаний. Так как все виды надёжности отражают степень согласованности двух независимо полученных рядов показателей, то математико-статистический приём, с помощью которого устанавливается надёжность методики, - это корреляции (по Пирсону или Спирмену). Надёжность тем выше, чем больше полученный коэффициент корреляции приближается к единице, и наоборот.

К.М. Гуревич предложил толковать надёжность как:

надёжность самого измерительного инструмента (коэффициент надежности);

стабильность изучаемого признака (коэффициент стабильности);

константность, т.е. относительную независимость результатов от Личности экспериментатора (коэффициент константности).

Показатель, характеризующий измерительный инструмент, предлагается называть коэффициентом надёжности; показатель, характеризующий стабильность измеряемого свойства, - коэффициентом стабильности; а показатель оценки влияния Личности экспериментатора – коэффициентом константности. Именно в таком порядке рекомендуется осуществлять проверку методики: целесообразно сначала проверить инструмент измерения. Если полученные данные удовлетворительны, то можно переходить к установлению меры стабильности измеряемого свойства, а уже после этого при необходимости заняться критерием константности. (Надёжность: ретестовая, параллельных форм, частей тела, по внутренней согласованности, факторно-дисперсионная).

Определение надежности измерительного инструмента. От того как составлена методика, насколько правильно подобраны задания, насколько она однородна зависит точность, объективность измерения.

Для проверки надежности измерительного инструмента, говорящего о его однородности (гомогенности) используют метод расщепления. Задания делят на четные и нечетные (необходимо выполнение всех заданий), а затем результаты коррелируются между собой. Если методика однородна, то большой разницы в успешности по этим половинам не будет, коэффициент будет высоким. Можно сравнивать по частям, но лучше по четным и нечетным, т.к. этот способ не зависит от тренировки, утомления и т.д.

Методика надежна, если коэффициент не ниже 0,75-0,85, лучше 0,90 и выше.