13. Проблемы и правила разработки личностных опросников.

Разработка психодиагностических методик, отвечающих всем предъявляемым к ним требованиям, является одной из наиболее сложных проблем современной психодиагностики.

В.П. Устинов предлагает следующий алгоритм разработки психодиагностической методики в форме опросника [Усти-нов, 2004]:

Этап 1. Определение цели разработки психодиагностической методики.

Первым этапом любого исследования является определение его целей. В данном случае целью является разработка психодиагностической методики. Зачем нам нужна новая методика?

Этап 2. Наименование шкал методики и их методологическое обоснование.

На этом этапе следует определить перечень тех психологических качеств, которые предполагается исследовать при помощи новой методики. При этом необходимо понимание того, что чем уже будет исследуемая область, тем выше будет и валидность новой методики. Здесь же необходимо определить, в какой форме проявляется интересующее нас психологическое явление. Проявляется оно в форме: «есть – нет», например, есть акцентуация характера по циклотимическому типу или ее нет. Или же это явление проявляется в виде конструкта, например «низкая тревожность – высокая тревожность».

Таким образом, задачей данного этапа является серьезное методологическое обоснование будущей методики.

Этап 3.Определение области применения методики.

На данном этапе необходимо принять решение о том, при работе с какой категорией испытуемых можно использовать методику, т.е. определить «область применения методики». Обычно речь идет о возрастных ограничениях и ограничениях по состоянию здоровья.

Необходимо также учитывать и состояние психического здоровья. Если предполагается исследовать людей, страдаю-щих шизофренией, разработчик опросника не в праве включать вопросы типа: «Вы человек здоровый?», поскольку такие люди, вероятно, решат, что речь идет не о физическом, а о психическом здоровье и могут счесть себя оскорбленными.

Помимо сказанного для повышения валидности методики необходимо также учитывать уровень образования (по-скольку речь идет о словарном запасе, его объеме и качестве) и род занятий испытуемых. Для примера, словарный запас чело-века, не имеющего среднего образования, вероятнее всего, будет значительно отличаться от словарного запаса сотрудника университета. Род занятий важен особенно при исследовании эмоционально-волевой и когнитивной сфер личности, поскольку существуют «экстремальные» профессии, где средние показатели, например, агрессивности у сотрудников силовых ведомств и работников сферы образования будут существенно отличаться. Соответственно необходимы и различные нормативы.

Кроме того, если будущая методика предполагает исследование эмоциональных проявлений, то необходимо учесть наличие половых различий, поскольку, ввиду различного гормонального статуса мужчин и женщин, средние показатели могут у них достаточно сильно отличаться.

Этап 4. Определение структуры методики.

Следующим этапом разработки психодиагностической методики является определение ее структуры. Необходимо от-ветить на следующие вопросы:

– Каким должен быть объем методики (сколько вопросов должно входить в ее состав, и какое время требуется для ее прохождения)?

– Какой должна быть система ответов (дихотомичная, ранговая, выбор из нескольких вариантов, ответы в свободной форме и т.д.)?

– Как будет обеспечиваться достоверность ответов (наличие шкалы лжи, оценка тенденции отвечать определенным образом, путем сопоставления ответов на разные вопросы, процедурой тестирования или как-то иначе)?

– Какой будет форма фиксации ответов испытуемого (на специальном бланке или в тексте опросника, самим испытуе-мым или психологом и т.д.)?

Ответы на эти вопросы зависят от целей методики и условий, в которых она будет использоваться.

Этап 5. Планирование алгоритма доказательной базы.

На данном этапе необходимо определить алгоритм доказательства валидности и надежности методики.

Поскольку доказательство валидности и надежности методики по своей сути есть экспериментальное исследование, следует выбрать экспериментальный план, в котором роль гипотезы выполняет утверждение – «Данная методика является ва-лидной и надежной». Соответственно, необходимо определить, сколько испытуемых потребуется для осуществления апроба-ции методики, обеспечения внутренней согласованности, верификации, стандартизации, оценки надежности и рестандартиза-ции. Необходимо определить, какими методами статистического анализа мы воспользуемся в процессе реализации указанных процедур.

Этап 6. Разработка текста опросника.

Основные требования, предъявляемые к содержанию опросника:

1. При формулировании заданий опросника необходимо устранять возможность проникновения испытуемых в суть того, что изучается при помощи данных заданий.

2. Необходимо формулировать понятные, недвусмысленные вопросы (утверждения).

3. Задания должны отражать конкретные, а не общие аспекты изучаемой области поведения

4. В каждом задании следует задавать только один вопрос или предъявлять только одно утверждение.

5. Следует избегать, насколько это возможно, слов, определяющих частоту действий.

6. Насколько возможно, следует избегать терминов, выражающих чувства.

7. При помощи инструкций необходимо обеспечить, чтобы испытуемые давали первые приходящие на ум ответы.

8. Необходимо учитывать тот момент, что содержание предыдущих вопросов оказывает влияние на восприятие после-дующих.

9. Вопросы и утверждения, входящие в состав методики, должны предъявляться в единообразной форме. Если в каче-стве задания используется форма утверждения, то и все последующие задания должны даваться в виде утверждений.

10. Объем первоначального варианта опросника должен не менее чем в два раза превышать тот, который планировал-ся.

Перед тем как приступать к составлению текста методики, следует проанализировать исследуемый признак на предмет того, в каких ситуациях он может проявляться. Это необходимо для составления перечня таких ситуаций..

В итоге, необходимо учесть все варианты и сформулировать вопросы исходя из того, что для описания каждой ситуа-ции потребуется по 2-3 вопроса.

Этап 7. Апробация методики.

Для апробации требуются испытуемые в количестве, равном или превосходящем количество вопросов методики. Есте-ственно, чем больше испытуемых привлекается, тем большей надежностью и валидностью в конечном итоге будет обладать методика.

Целями этапа апробации являются следующие:

 Оценить, как воспринимается текст опросника. Если более 10 % испытуемых делают замечание по поводу неэтичности или неясности какого-то вопроса, его следует исключить.

 Обеспечить внутреннюю согласованность методики. Под внутренней согласованностью психодиагностиче-ской методики понимается общая направленность каждого его компонента на достижение целей, предусмот-ренных методикой в целом.

 Разработать ключ методики. Цель достигается так же посредством факторного анализа.

Идеальная методика – это методика, которая по результатам факторного анализа выделяет лишь один исследуемый фактор, а все вопросы, входящие в ее состав, являются значимыми.

Этап 8.Проверка валидности.

Необходимо ответить вопрос, отражается ли изменение выраженности исследуемого признака на результатах, полу-ченных при помощи создаваемой методики.

Для осуществления оценки валидности методики необходимы экспериментальные и контрольные группы. Осуществ-ляя комплектацию экспериментальных групп, необходимо исходить из того, что основным показателем включения человека в группу является наличие у него выраженного признака, о котором нам известно заранее (из других источников). Контрольная группа комплектуется в соответствии с половозрастным составом экспериментальной, то есть методом попарного выравнива-ния.

Далее необходимо осуществить тестирование всех испытуемых и сравнить полученные данные при помощи методов математической статистики.

Этап 9. Верификация методики.

Верификация – особый метод проверки валидности, осуществляемый путем сравнения результатов тестирования ис-пытуемых, осуществленного при помощи различных методик, исследующих одно и то же психологическое явление. Цель – установление наличия значимой положительной корреляции между методиками.

Соответственно, вновь необходимо привлечь группу испытуемых. С точки зрения В.П. Устинова, минимальный объем выборки должен составлять не менее 15-20 человек.

Этап 10. Стандартизация метода обработки результатов.

Необходимо разработать систему перевода сырых баллов в стандартные. Это могут быть «стены» (стандартная десятка), «станайны» (стандартная девятка), «Т-баллы» и многие другие. Принципиальной разницы в том, какой метод стандартизации будет выбран, нет.

Этап 11. Стандартизация метода интерпретации результатов.

Составление стандартизованной интерпретации результатов тестирования в зависимости от суммы набранных баллов. Необходимо обратить внимание на то, что следует описывать не только крайне выраженные показатели (баллы, набранные по шкале), но и средние, и пороговые. Это значительно облегчит работу психологов с методикой.

Этап 12. Стандартизация процедуры тестирования.

Здесь, в отличие от предыдущих этапов, требуется привлечение как минимум еще одного психолога. Это необходимо для того, чтобы оценить возможность влияния фактора «психолог» на результаты тестирования.

Алгоритм конструирования психологических методик, в целом, совпадает в большинстве соответствующих руко-водств. Таким образом, конструирование теста – сложный творческий процесс работы психодиагноста, подчиняющийся ряду обязательных требований, представленных в виде последовательности этапов.

Есть ряд требований к авторам и издателям методик.

Первое из них устанавливает, что методики нельзя выпускать для практического применения преждевременно, не получив подтверждения их удовлетворительных психометрических характеристик. Качество диагностической методики устанавливается посредством достаточного числа теоретико-экспериментальных исследований, относящихся к ней. Поэтому сначала методика распространяется как исследовательская — и это условие должно быть в обязательном порядке указано в каталогах издателей.

Второе требование касается рекламы методики и устанавливает, что недопустимы какие-либо заявления относительно ее достоинств, если для них нет достаточных объективных оснований.

Третье требование обязывает авторов методик составлять руководство по использованию, дающее полную информацию относительно процедуры проведения, способов анализа и оценки результатов. В руководстве должны содержаться сведения о всех параметрах методики, позволяющие оценить ее достоинства. При этом подчеркивается, что руководство предназначено изложить все, что известно о методике, и не должно быть средством рекламы, показывающим ее в выгодном свете.

Четвертое требование устанавливает, что авторы методик обязаны периодически проверять их и рестандартизировать, чтобы предотвратить их устаревание. Как часто это следует делать — зависит от характера методики, поэтому авторы должны принять на себя ответственность за то, чтобы обновлять методики своевременно.