15 Общие принципы и этапы проектирования психодиагностической методики.

Таксономия объективных тестов.

Таксономия — это наука о классиф., то есть, распределении индивидуумов по группам в рамках системы категорий, различающихся априорными характеристиками. В принципе, можно формировать однородные группы объектов на основе оценки «сходств» или распределять объекты по взаимно исключающим группам на основе оценки «различий».Психологические тесты могут различаться один от другого по следующим признакам:

- инструкции (направлены на объяснение смысла заданий и порядка действий испытуемых);- материал теста (он может быть взят из социальной области или, например, из физики):- особенности оценивания полученных от испытуемого ответов. С учетом того, что инструкция отражает определенный стимульныи материал, первые два элемента могут быть объединены в один и обозначены термином "стимульно-инструктивная ситуация" (термин, обобщающий особенности как материала теста, так и прилагаемой к нему инструкции).

Этапы проектирования теста.

Этапы проектирования теста:

1.Определение цели применения теста (в зависимости от цели тест применяется в различных случаях, причём, чем важнее цель, тем чувствительнее должна быть методика). 2.Определение сферы использования методики (кроме использования методики в какой-либо одной сфере, одна и та же методика может иметь применение в нескольких сферах). 3.Выбор конкретной сложности теста (полнота и сложность методики обусловлены наличием у пользователя специальных психологических знаний, навыков и умений, а также опыта психометрической и психодиагностической деятельности; в зависимости от того, кто будет применять тест (методику) может быть два варианта сложности - для специалистов психологов тест может быть с полной и сложной интерпретацией результатов; для неспециалистов используется упрощенный вариант). 4.Определение особенностей диагностируемых популяций (в этом плане должно быть учтено распределение выборки по определённым параметрам; в зависимости от состава популяции характер, форма и содержание стимульного материала должно быть согласовано с характеристикой популяции). 5.Предметная направленность теста (в зависимости от предметной направленности может планироваться разработка единичного теста, батареи, системы или набора тестов; в соответствии с предметной направленностью выбирается соответствующий стимульныи материал). 6.Выбор и определение стимульного материала теста (стимульно-инструктивная ситуация изменяется в зависимости от ряда параметров, которые обуславливают существование 213 типов стимульно-инструктивных ситуаций). 7.Определение формы ответов на задания (при составлении заданий необходимо помнить, что изменение формы ответа влияет на валидность методики; формы ответов должны быть стандартизированы, где это возможно).

Определение цели применения теста.

Определение цели применения теста – 1-й этап проектирования теста. В зависимости от цели тест применяется в шести случаях: для постановки психиатрического, психологического диагноза; для классификации специалистов; в дифференциальной психодиагностике при поиске и определении индивидуальных различий между людьми: для расстановки и перестановки кадров: в ходе профориентационной работы, для подбора и профотбора кадров. Чем важнее цель, тем чувствительнее должна быть методика. Для практической диагностики в целях отбора и расстановки кадров методика должна иметь нормативно-установленные стандарты: цель методики формулируется с учетом потребностей и реальных возможностей специалистов; источниками формирования целей теста являются: прецеденты, прогнозы специалистов, литературные источники, прошлый опыт, социальный заказ, экспертные данные.

Определение сферы использования методики и ее конкретной сложности.

Определение сферы использования методики – 2-й этап проектирования теста. Выделяются следующие сферы, где могут использоваться методики: образование, производство, оборона, транспорт, здравоохранение, социальное обеспечение, сферы услуг, наука, правосудие, государственная безопасность, спорт, управление обществом, культура, искусство, экология, воспитание. Одна и та же методика может иметь применение в нескольких сферах. Выбор конкретной сложности теста – 3-й этап проектирования теста. Полнота и сложность методики обусловлены наличием у пользователя специальных психологических знаний, навыков и умений, а также опыта психометрической и психодиагностической деятельности. В зависимости от того, кто будет применять тест (методику) может быть два варианта сложности: для специалистов психологов тест может быть с полной и сложной интерпретацией результатов; для неспециалистов используется упрощенный вариант. Упрощенный вариант предполагает однозначность трактовки результатов, доступную неспециалисту. Кроме того, необходимо предусмотреть конкретный уровень трудности теста для испытуемых. Уровень трудности - это субъективная сложность заданий теста для данной выборки. В статистическом плане трудность заданий теста - это доля лиц (в процентах), решивших и нерешивших задание теста. Индекс трудности задания вычисляется как степень его решаемости относительно всей группы испытуемых. Задание считается оптимальным, если его решили правильно около 50% испытуемых. Если задание решается почти всеми испытуемыми, то одним из вариантов может быть сокращение времени на его решение. Если наоборот, задание не решается большинством испытуемых, следует либо переформулировать его, либо исключить из теста.

Определение особенностей диагностируемых популяций.

Определение особенностей диагностируемых популяций – 4-й этап проектирования теста. В этом плане должно быть учтено распределение выборки по параметрам: пола, образовательного уровня и вида образования, владения языком, на котором составлена методика, национальности, вероисповедания, принадлежности к какой-либо профессиональной группе, социальному происхождению, территории, на которой проживает. В зависимости от состава популяции характер, форма и содержание стимульного материала должно быть согласовано с характеристикой популяции.

Определение предметной направленности теста.

Определение предметной направленности теста – 5-й этап проектирования теста. Тест может измерять следующие характеристики: внешнее поведение или внутреннее состояние: свойства, черты, качества, процессы, состояния, образования или особенности личности; сложная (комплексная) или простая характеристика личности; выраженность, частота или интенсивность проявления психической характеристики.

В зависимости от предметной направленности может планироваться разработка единичного теста, батареи, системы или набора тестов. В соответствии с предметной направленностью выбирается соответствующий стимульныи материал.

Выбор и определение стимульного материала.

Выбор и определение стимульного материала теста – 6-й этап проектирования теста. Стимульно-инструктивная ситуация изменяется в зависимости от ряда параметров:

а) Форма задания (пунктов) теста: цифры, задачи, фигуры, картинки, схемы, рисунки, буквы, символы, сюжеты, фрагменты, цвета, графики.

б) Форма вопроса или утверждения (может быть и смешанный тип).

в) Реакция или ее отсутствие. В общем требуется реакция на стимул. Но это не всегда так, как. например, в тестах на чувствительность к боли,

г) Ограниченность-неограниченность способов реагирования. В тестировании не известны случаи неограниченного разнообразия ответов. Предполагается, что испытуемые не будут жевать материал тестов или портить его. Однако ответы могут быть относительно свободными, как, например, в проективных тестах, или с накладываемыми на них ограничениями, как при измерении времени реакции.

д) Ответы придуманные (созданные) самостоятельно или отобранные из набора вариантов. Значение этого параметра очевидно. Примером последних являются ответы типа "правда-неправда", а примером первых - описание рисунков ТАТ (теста тематической апперцепции).

е) Единичные или повторяющиеся ответы.

ж) Последовательность ответов: упорядоченная или неупорядоченная. Это относится к тому, до какой степени от испытуемых требуется давать ответы в определенном порядке

з) Однородность или разнородность ответов. В некоторых тестах требуются ответы одного и того же вида, а в других предусмотрены ответы различных типов.

и) Естественность темпа или ограниченность времени на ответы, к) Завершенность (окончательность) реакции или реагирование на реакцию. Испытуемый реагирует либо на материал теста, либо на свою собственную реакцию, например, тот или иной стимул как-либо оценивается, вызывает ассоциации или воспоминания.

л) Явный стимул или неявный. Некоторые тесты не имеют никакого вне их лежащего значения, такие параметры, как измеряющие время реакции. Однако в определенных тестах (там, где интересуются мнением о чем-либо) это присутствует. Большинство видов искажений и сложностей возникают именно в тех тестах, значение которых неявно.

м) Представление теста в виде отдельных заданий или целостное представление. Этот параметр касается различий между тестами, состоящими из отдельных заданий или из одного единственного.

н) Психологическая сущность действия, необходимого для выполнения задания. Этот параметр учитывает, требуется ли для ответа, а) знания; б) мнение о чувствах, отношениях; или в) опознание или распознание.

о) Различие в мотивах приемлемости ситуации тестирования.

п) Различия в свободе выхода из ситуации тестирования.

Вышесказанное обуславливает существование 213 типов стимульно-инструктивных ситуаций.

Отбор и оценивание заданий.

Отбор и оценивание заданий – один из параметров, лежащих в основе оценивания ответов. Однородный и дискриминативный тест может быть получен путем отбора заданий, имеющих высокую корреляцию с общим показателем и, помимо этого, долю правильно ответивших (в соответствии с "ключом") испытуемых в пределах 80% - 20%.

Определение формы ответов на задания.

Определение формы ответов на задания- 7-й этап проектирования теста. Могут быть использованы четыре формы ответов: а) выражающие отношения: согласия, неопределенности, отрицания; б) ответы как проекция актуальных, ретроспективных или перспективных состояний испытуемого, его отношений на стимульный материал; в) как свободная интерпретация заданий или вопросов; г) как выбор из вариантов ответов предпочитаемого. При составлении заданий необходимо помнить, что изменение формы ответа влияет на валидность методики. Формы ответов должны быть стандартизированы, где это возможно.

Поиск, выделение и обоснование критериев валидизации методики.

Поиск, выделение и обоснование критериев валидизации методики – один из параметров, лежащих в основе оценивания ответов. Концептуальная валидизация включает проверку теоретической обоснованности конструктов (концептов) теста, сравнение их с уже известными теориями, общепринятыми и общеизвестными положениями. Один из вариантов валидизации, когда эксперты оценивают по 5-балльной шкале каждое задание теста на предмет соотнесенности этих заданий с теорией. Валидизация эмпирическая - это выявление наиболее репрезентативных для исследуемой характеристики личности признаков поведения и деятельности человека. Критерий валидизации - признак, хорошо (достаточно надежно, полно) отражающий необходимое нам качество (свойство, процесс).

Последовательность поиска и выделения критериев: изучается максимально возможный перечень критериев в реальной жизнедеятельности популяции, связанных с изучаемым свойством: выделяется из них наиболее практичный и репрезентативный; оценивается соответствие критерия требованиям его устойчивости, надежности, адекватности, дифференцирующей способности;

Многообразие видов критериев валидизации.

ВАЛИДНОСТЬ: КРИТЕРИЙ — применительно методик означает независимые показатели и признаки, по коим можно судить о ее валидности. По этим критериям оцениваются результаты, получаемые при практическом применении методики. Критерии могут быть таковы:

1) поведенческие показатели — реакции, действия и поступки испытуемого в различных ситуациях жизни;

2) достижения испытуемого в различных видах деятельности — учебной, трудовой и пр.;

3) данные о выполнении различных контрольных проб и заданий;

4) данные, получаемые из других методик, валидность или же связь коих с проверяемой методикой считается твердо установленной.

Требования к критерию валидизации.

Критерий валидизации - признак, хорошо (достаточно надежно, полно) отражающий необходимое нам качество (свойство, процесс). Требования к критерию валидизации: утойчивость (т.е. не должен изменяться); надежность; адекватность (соответствие его содержания, формы исследуемой характеристике); дифференцирующая способность критерия (способность с его помощью отграничивать данную характеристику от тех. которые ею не являются).

Расчет временных параметров теста.

Расчет временных параметров теста - один из параметров, лежащих в основе оценивания ответов. Для расчета временных параметров следует уяснить: необходимо или нет ограничение по времени для испытуемых; учесть сложность и длину методики (количество заданий); учесть необходимые затраты на инструктирование, работу испытуемых со стимульным материалом и обработку результатов; если тестирование проводится с использованием ЭВМ, то осуществляются отдельные расчеты. Расчет времени носит сугубо предварительный характер. После экспериментальной работы временные параметры теста уточняются. Обычно на работу с одним тестом должно уходить времени не более двух - двух с половиной часов с перерывами.

Определение условий применения теста.

Определение условий применения теста - один из параметров, лежащих в основе оценивания ответов. Определяются 2 группы условий:

а) организационные: учет квалификации экспериментатора (разработчик психодиагностической методики, пользователь-профессионал, пользователь-неспециалист); отношения с испытуемыми (добровольные-обязательные, бесплатные, за оплату);

б) материально технические: необходимость специально оборудованного помещения; компьютеризованный, бланковый или смешанный варианты методики; необходимость аудио, видеоаппаратуры; стандартные для всех испытуемых условия.

Формирование исследовательской выборки.

Формирование исследовательской выборки - один из параметров, лежащих в основе оценивания ответов. Наиболее важными здесь являются две процедуры: определение необходимого количества выборок (лучше 2-3); определение их количественных и качественных характеристик.

Компоновка и оформление бланков, буклетов со стимульным материалом.

Компоновка и оформление бланков, буклетов со стимульным материалом - один из параметров, лежащих в основе оценивания ответов. Последовательность работы: составление композиционной схемы: наполнение композиционной схемы стимульным материалом. Стимульный материал должен быть оформлен в соответствии с нормативными требованиями по форме, размеру, цвету, расположению. Размеры всех знаков и стимулов должны при этом обеспечивать хорошее восприятие без коррекции зрения.

Разработка ключей, инструкций и интерпретационных схем.

Разработка ключей, инструкций и интерпретационных схем - один из параметров, лежащих в основе оценивания ответов. Составляются инструкции экспериментатору и испытуемому. Инструкция не должна быть перегружена деталями и подробностями. Формулировки не должны содержать двусмысленных оттенков. Сама инструкция помещается как правило на первом листе. Схема интепретаций должна позволить составить итоговое заключение психолога. При этом существуют три вида заключений: описательное (психологическая характеристика обследуемого); консультационное (делается прогноз дальнейшего развития); оценочное (в виде балльной оценки изучаемого свойства).

Адаптация теста.

Важна социокультурная адаптация теста, т.е. соответствие тестовых заданий и оценок особенностям культуры, сложившейся в том или ином обществе. В противном случае получаемые результаты будут, скорее всего, неточными. Задания теста и их оценка должны соотноситься с социокультурным нормативом - уровнем свойства, который явно или неявно считается в обществе необходимым.