Коэффициенты ранговой корреляции ч. Спирмена, м. Кенделла. Коэффициент конкордации

О надежности полученных оценок судят по таким характеристикам, кот описывают разброс оценок. Степень согласованности оценок 2-ух экспертов или 2-ух групп экспертов характеризуется коэф ранговой корреляции Ч. Спирмена:

(1);

n – число критериев; xi, yi – соответствующие оценки 1-ым и 2-ым экс-ом i-ого критерия.

-1<= ρ<=1. Чем ближе ρ к 1, тем более согласованы оценки. Согласованность считается удовлетворительной ρ=0,85-0,9, хорошей ρ>=0,95.

Вместо формулы (1) часто используют (2):

(2).

Для оценки согласованности мнений группы состоящей из m экспертов по n показателям применяется коэф. конкордации

(3).

В случае отсутствия равных рангов в оценках любого из экспертов коэф. конкордации определяется по формуле 3. В случае если какой-либо эксперт не может установить ранговые различия между несколькими показателями и присваивает им одинаковые ранги коэф конкордации определяется по формуле:

(4)

; h- число групп равных рангов в оценках i-ого эксперта; t_l-число равных рангов в оценках i-ого эксперта.

К-т конкордации принимает знач-е 0<=W<=1. При полном отсутствии согласованности мнений экспертов W=0. При полной согласованности W=1. Согласованность считается удовлетворительной, если W>=0.5, и хорошей при W>=0.7.

Выбор варианта системы методом экспертных оценок

Пусть имеются m экспертов ……., котор. оценивают n конкурирующих вариантов B₁,...,B_n. Рассм-м м-д эксп-х оценок, позволяющий выбрать рацион-й вариант. Этапы:

1. Сост-ся матрица взаимных оценок компетентности экспертов. При этом каждый эксперт оценивает компетентность всех др. экспертов, входящих в группу. Оценки экспертов собирается раздельно и мнения не оглашаются. Для взаимной оценки комп-ти экс-в исп-ся 10-ти бальная шкала: 0≤R_ij≤10.

	Э1	Э2	…	Эm
Э1	-	R12	…	R1m
Э2	R21	-	…	R2m
…	…	…	-	…
Эm	Rm1	Rm2	…	-

2. На основе получ. м-цы. выч-ся след.:

а) оценки комп-ти экспертов

Формула (1)

б) дисперсии оценок экспертов.

Формула (2)

Формула (3)

Дисперсия оценок эксп-ов имеют след. смысл:

- даёт инф-ю о близости индив-х суждений каждого отд-го эксперта суждением всего коллектива экспертов.

- хар-т степень согл-ти группы экспертов при оценке компетентност и j-го эксперта.

3. Сост-ся м-ца оценок конкурирующих вариантов с-м

	В1	В2	…	Вm
Э1	С11	С12	…	R1n
Э2	C21	C22	…	R2n
…	…	…	…	…
Эm	Cm1	Cm2	…	Cmn

0≤C_jk≤10

j=1,m; k=1,n

4. На основе получ. матрицы вычисл-ся след. хар-ки:

а) к-т предпочтит-ти вариантов

(4)

б) дисперсии оценок вариантов:

Формула (5)

Формула (6)

=> коллект-ая оценка к-го варианта с-мы.

Дисперсии оценок вариантов имеют след. смысл:

- даёт инф-ю о близости инд-х суждений к коллективным суждениям группы экспертов в отношении оценки варианта с-мы.

- хар-ет степень согл-ти группы экспертов при оценке к-го варианта с-мы.

5. Выявл. Аномальные значения дисперсии и .

Экспертом с котор. связано достаточно больш. знач-е предоставляется возм-ть защищать свою точку зрения. Если знач-я удовл-т организаторов экспертизы, то выбирается рациональный вар-т. Иначе произв-ся уточнение и дополнение исх-х данных. После чего этапы 1-5 повторяются снова.

Методы контрольных вопросов и коллективного блокнота.

Метод контрольных вопросов применяется для психологической активизации творческого процесса. Цель метода состоит в том, чтобы с помощью наводящих вопросов подвести к решению задачи. Метод может применяться как в индивидуальной работе, так и при коллективном обсуждении проблемы, например, при «мозговом штурме». Один из широко распространенных вопросников А.Осборна включает 9 групп вопросов. 1. Какое новое применение системе можно предложить? 2. На какую другую систему похожа данная система и что можно скопировать? 3. Что можно в системе увеличить? 4. Что можно в системе заменить? 5. Что можно в системе уменьшить? 6. Что можно в системе заменить? 7. Что можно в системе преобразовать? 8. Что можно сделать в системе наоборот? 9. Какие новые комбинации элементов системы возможны? В данных вопросах содержатся рекомендации по апробированию эвристических приемов (инверсия, аналогия, дробление, перенос и др.) для решения поставленной задачи.

Метод коллективного блокнота позволяет сочетать независимое выдвижение идей каждым членом рабочей группы с коллективной их оценкой и процессом выработки решений. Метод реализуется следующим образом. Каждый участник получает блокнот, в котором записывает в общих чертах без применения специальных терминов существо проблемы, а также данные, позволяющие ориентироваться в ней. В течение месяца каждый участник ежедневно заносит в блокнот возникающие по рассматриваемой проблеме идеи, оценивает их и определяет, какие их них могут обеспечить наилучшее решение задачи.

Одновременно формулируются наиболее целесообразные направления исследования на последующем этапе работы. Кроме того, в блокноте фиксируются идеи, находящиеся в стороне от основной проблемы, но развитие которых может оказаться полезным для нахождения конечного решения. Систематизация зафиксированных в блокнотах идей осуществляется руководителем группы, а заключительное творческое обсуждение - всеми членами группы. Выбор окончательного решения проводится методом «мозгового штурма».