13.2. Процедура психометрической проверки
Таким образом, с опорой на психологический анализ управленческой деятельности и процесса принятия управленческого решения разработана двухмерная классификация стилей принятия управленческих решений. Это-первый шаг на пути создания инструментария для определения индивидуально-типического стиля принятия управленческого решения. На этом этапе описывается сам конструкт и его составляющие. Далее двигаясь по цепочке конструкт - индикаты - индикаторы - пункты опросника составляется первоначальный вариант методики диагностики стиля принятия управленческого решения, (в данном случае он состоял из восьмидесяти утверждений). Следующим шагом в решении одной из основных задач исследования (а именно-создание тестовой процедуры для диагностики стиля ПУ Р) являлось проведение необходимой и достаточной психометрической проверки разрабатываемой методики.
Прежде чем приступить к описанию алгоритма психометрической проверки методики диагностики стиля принятия управленческого решения остановимся на некоторых моментах, связанных с общей структурой данной процедуры. Практически во всех литературных источниках, посвященных вопросам психометрики, отмечается, что наиболее универсальная процедура психометрической проверки психологического теста должна состоять из нескольких основных этапов [2,3,10,46,63,65,68].
Первым этапом проверки является анализ пунктов теста, смысл которого состоит в том, чтобы каждое задание теста соответствовало общему диагностическому содержанию методики.
Вторым этапом психометрической проверки является проверка двух основных видов надежности теста: надежности по однородности и надежности по устойчивости. Задачей проверки на надежность является определение того, насколько результаты тестирования подвержены влиянию различных побочных факторов.
Третий этап заключается в оценке двух основных видов валидности или обоснованности теста: валидности критериальной и валидности конструктной. Задачей данного этапа является определение того, насколько хорошо создаваемая методика выполняет свои диагностические задачи, т.е. диагностирует тот конструкт, который лежит в ее основе.
Кроме того, заключительным этапом психометрической подготовки опросника для практического использования является этап расчета нормативных показателей для каждой шкалы разрабатываемого теста. Однако данный этап не вошел в наше исследование, т.к. необходим сбор дополнительной информации для его реализации. Уже выполнение всех предыдущих этапов позволяет решать исследовательские задачи с помощью данного инструментария.
Таким образом, описанный выше порядок обработки результатов опроса является основой тех процедур, которые должны быть обязательно использованы в ходе психометрической проверки любой методики, направленной на диагностику стилевых особенностей управленческой деятельности.
13.2.1. Анализ пунктов
Первый этап психометрической проверки методики диагностики стиля принятия управленческого решения заключается в статистической проверке диагностической пригодности каждого утверждения методики. На начальном этапе разработки составляется заведомо избыточный первый вариант перечня утверждений, направленных на диагностику двух гипотетических конструктов второго порядка для их первичного статистического анализа. Предполагается, что каждый пункт психологического теста должен быть проверен по нескольким психометрическим показателям, к которым в первую очередь относятся индекс трудности, коэффициент корреляции с итоговым баллом и характер распределения тестовых оценок [2, 3,46, 52].
Индекс трудности, смысл которого состоит в том, чтобы определить процентное соотношение испытуемых, ответивших в соответствиис "ключом". В психодиагностике термин "индекс трудности" чаще всего используется в отношении, так называемых, тестов достижений и интеллектуальных тестов, в которых ответ в соответствии с "ключом" является критерием правильности решения задания. В тестах диагностирующих не интеллектуальные, а другие психологические особенности индекс трудности также отражает процентное соотношение лиц, ответивших в соответствии с "ключом". При этом, однако, не предполагается, что при заполнении данного рода тестов, могут существовать правильные или неправильные ответы. С точки зрения теории психодиагностики данный параметр для каждого пункта психологического теста должен находиться в пределах от 0.16 до 0.84 (это означает, что в соответствии с "ключом" на данный пункт должны отвечать не менее 16-ти и не более 84-х процентов испытуемых). Указанный диапазон приемлемых значений не является случайным. Если предположить, что частоты распределения оценок испытуемых подчиняются нормальному закону, то в пределах М ± 1 а находятся около 68% всех испытуемых, а за этими пределами - по 16% испытуемых. Эти величины и принимаются как пороговые при отборе заданий из первичной формы теста.
Вторым определяемым психометрическим показателем при анализе пунктов является коэффициент корреляции между ответом испытуемого на данное утверждение и итоговым баллом по соответствующей шкале. Если данный коэффициент корреляции значим, то делается вывод о том, что конкретный пункт способен измерять тот же самый конструкт, что измеряет вся шкала в целом. Обычно в литературе, посвященной проблемам психометрики данный параметр известен как дискриминативность заданий теста" [42, 43, 44, 46], т.е. способность отдельных заданий теста дифференцировать испытуемых относительно "минимального" или "максимального" результата теста. Коэффициент корреляции с итоговым баллом может принимать значение от -1 до +1. По мнению рада авторов, коэффициент корреляции ответа испытуемого на конкретное задание теста с итоговым баллом является, по сути, показателем критериальной валидности отдельного пункта, поскольку определяется по отношению к внешнему критерию суммарному результату по всему тесту (46].
Такой статистический показатель как характер распределения тестовых оценок используется при проверке тестовых заданий, которые предполагают многоступенчатую порядковую шкалу ответов. Поскольку в опроснике использовалась именно такая семиступенчатая шкала, данный статистический параметр также учитывался при отборе тестовых заданий. Цель определения данного показателя состоит в том, чтобы в окончательную форму методики попали бы только те утверждения, тестовые оценки по которым подчиняются закону нормального распределения, т.е. наибольшее количество испытуемых выбирает средние варианты ответа, в то время как самые крайние варианты ответов выбираются меньшим количеством испытуемых. В том случае, если характер распределения тестовых оценок не соответствует закону нормального распределения, можно говорить о том, что данное задание теста не является достаточно диагностичным.
Первичный вариант методики состоял из 80 утверждений (по 40 утверждений на каждую шкалу, 20 из которых были прямыми, а 20 обратными). После составления такого первичного варианта был собран статистический материал для психометрической проверки пунктов. Выборка состояла из 165 человек (80 женщин и 85 мужчин) в возрасте от 24 до 65 лет (все опрошенные занимаются управленческой деятельностью). Затем для каждого утверждения первичной формы методики рассчитывались следующие статистические показатели:
1. Индекс "трудности", вычисляемый по формуле: Ит ~ Nb/a • п, где: Nb-количество балов, полученных всеми испытуемыми в одном
утверждении,
а - максимальный балл по шкале ответов, п - общее количество ответивших.
Коэффициент корреляции с итоговым баллом (произведение моментов Пирсона)
Частотное распределение вариантов ответа.
После того, как для всех 80 утверждений были рассчитаны данные показатели, из списка утверждений были исключены 30 пунктов-индикаторов, которые не удовлетворяли хотя бы одному психометрическому требованию. При отборе утверждений необходимо руководствоваться следующими исходными положениями: приемлемые значения индекса трудности должны находиться в диапазоне от 0.16 до 0.84, коэффициент корреляции с итоговым баллом должен принимать значения не ниже 0.21 (для уровня значимости 0.01), а частотное распределение вариантов ответа должно приближаться к нормальному [45].
Оставшиеся 50 утверждений, по 25 на каждую шкалу были оформлены в виде опросника, который снова подвергся статистической проверке на выборке из 126 респондентов-руководителей. Показатели, полученные а результате этой проверки, представлены в табл. 13.1.
Таблица 13.1.
Статистические показатели пунктов опросника "Стиль принятия управленческих решений"
№ вопроса |
Индекс трудности |
Коэфф корр. с итог. баллом |
№ вопроса |
Индекс трудности |
Коэфф корр. с итог баллом |
2 |
0.68 |
0.58 |
27 |
0.51 |
0.63 |
3 |
0.49 |
0-45 |
28 |
0.63 |
0.34 |
4 |
0.54 |
0,49 |
29 |
0.61 |
0.33 |
5 |
0.76 |
0.44 |
30 |
0.79 |
0.49 |
6 |
0.53 |
0.47 |
31 |
0.44 |
0,422 |
7 |
0.49 |
0.39 |
32 |
0.74 |
0.49 |
8 |
0.41 |
0.52 |
33 |
0.43 |
0.37 |
9 |
0.68 |
0.46 |
34 |
0.5S |
0.33 |
10 |
0.66 |
0.53 |
35 |
0.47 |
0.37 |
11 |
0,64 |
0.50 |
36 |
0.5S |
038 |
12 |
0.71 |
0.48 |
37 |
0.76 |
0.37 |
13 |
0.58 |
0.60 |
3S |
0.76 |
0.72 |
14 |
0.59 |
0.49 |
39 |
0.67 |
0.41 |
15 |
061 |
0.60 |
40 |
0.79 |
0.39 |
16 |
0.44 |
0.56 |
41 |
068 |
0.39 |
17 |
0.73 |
0.53 |
42 |
0.58 |
0.41 |
18 |
0.62 |
0.52 |
43 |
0.42 |
O.S0 |
19 |
0,53 |
0.42 |
44 |
0.61 |
0.59 |
20 |
0S4 |
0,46 |
45 |
067 |
0.56 |
21 |
0.68 |
0,42 |
46 |
0.64 |
0.42 |
22 |
0.44 |
0.73 |
47 |
0.61 |
0.55 |
23 |
0.43 |
0.48 |
48 |
0.62 |
0.47 |
24 |
0.61 |
0.46 |
49 |
0,78 |
0.45 |
25 |
0,51 |
0,59 |
50 |
0.68 |
0.52 |
26 |
0.59 |
0.47 |
51 |
0.44 |
0.56 |
Примечание: все корреляции значим» при р £0.01 (п - 16S).
