3.2. Методы экспертных оценок

Основная идея прогнозирования на основе экспертных оценок заключает­ся в построении рациональной процедуры интуитивно-логического мышления человека в сочетании с количественными методами оценки и обработки полу­чаемых результатов.

Сущность методов экспертных оценок заключается в том, что в основу прогноза закладывается мнение специалиста или коллектива специалистов, основанное на профессиональном, научном и практическом опыте. Различают индивидуальные и коллективные экспертные оценки.

Индивидуальные экспертные оценки основаны на использовании мнений экспертов-специалистов соответствующего профиля. Среди индивидуальных экспертных оценок наиболее широкое распространение получили метод "ин­тервью", аналитический метод, метод написания сценария.

Метод "интервью" предполагает беседу прогнозиста с экспертом по схе­ме "вопрос-ответ", в процессе которой прогнозист в соответствии с заранее раз­работанной программой ставит перед экспертом вопросы относительно пер­спектив развития прогнозируемого объекта. Успех такой оценки зависит в зна­чительной степени от способности эксперта давать заключение экспромтом по самым различным вопросам.

Аналитический метод предусматривает тщательную самостоятельную работу эксперта над анализом тенденций, оценкой состояния и путей развития прогнозируемого объекта. Эксперт может использовать всю необходимую ему информацию об объекте прогноза. Свои выводы эксперт оформляет в виде докладной записки. Основным преимуществом этого метода является возмож­ность максимального использования индивидуальных способностей эксперта. Однако он мало пригоден для прогнозирования сложных систем и выработки стратегии из-за ограниченности знаний одного специалиста-эксперта в смеж­ных областях знаний.

Метод написания сценария следует отнести как к индивидуальным, так и к коллективным экспертным оценкам. Сущность и основные его характеристи­ки будут раскрыты ниже.

Наиболее достоверными являются коллективные экспертные оценки. Ме­тоды коллективных экспертных оценок предполагают определение согласован­ности мнений экспертов по перспективным направлениям развития объекта прогнозирования, сформулированным отдельными специалистами. В современ­ных условиях используется математико-статистический инструментарий для обработки результатов опроса экспертов. Например, для оценки степени согла­сованности мнений экспертов по решению той или иной исследуемой пробле­мы исчисляются: дисперсия оценок, среднеквадратическое отклонение оценок,

а на этой основе - коэффициент вариации оценок. Чем меньше значение этого коэффициента, тем выше согласованность мнений экспертов.

Для организации проведения экспертных оценок создаются рабочие груп­пы, в функции которых входят проведение опроса, обработка материалов и ана­лиз результатов коллективной экспертной оценки Рабочая группа назначает экспертов, которые дают ответы на поставленные вопросы, касающиеся пер­спектив развития данного объекта. Количество экспертов, привлекаемых для разработки прогноза, может колебаться от 10 до 150 человек, в зависимости от сложности объекта. Определяется цель прогноза, разрабатываются вопросы для экспертов. При проведении опроса необходимо обеспечить однозначность по­нимания отдельных вопросов и независимость суждений экспертов. После опроса осуществляется обработка материалов коллективной экспертной оцен­ки. Окончательная оценка может определяться как среднее суждение или как среднее арифметическое значение оценок всех экспертов. Могут использовать­ся и другие подходы. При разработке научно-технических прогнозов методика статистической обработки материалов предусматривает использование сово­купности оценок относительной важности, сделанных экспертами по каждому из оцениваемых направлений научных исследований. Оценки важности выра­жаются в баллах и могут принимать значения от 0 до 1, от 0 до 10, от 0 до 100 и т.д.

В мировой практике среди методов коллективных экспертных оценок наиболее широкое применение нашли: метод коллективной генерации идей, ме­тод "635", метод "Дельфи", метод "Комиссий", метод написания сценария. Рассмотрим сущность перечисленных методов.

Сущность метода коллективной генерации идей (мозговой атаки) состо­ит в использовании творческого потенциала специалистов при "мозговой атаке" проблемной ситуации, реализующей вначале генерацию идей и последующее деструктурирование (разрушение, критику) этих идей с формулированием контр идей и выработке согласованной точки зрения. Это один из методов по­иска идей, который впервые был разработан в конце 30-х годов американцем А. Осборном, стремившимся решать проблемы посредством спонтанно возникаю­щих идей. Нечто подобное использовали 400 лет назад индийские мастера "Хинду" во время своих собраний: запрещались Ротика и дискуссии, каждый мог свободно выражать свои идеи, оценка выносилась позже.

Метод коллективной генерации идей предполагает реализацию следую­щих этапов. Первый этап связан с формированием группы участников "мозго­вой атаки" (по численности и составу) но решению определенной проблемы. Оптимальная численность группы участников находится эмпирическим путем. Наиболее продуктивными признаны группы в количестве 10-15 человек. На втором этапе составляется проблемная записка. Она формируется группой ана­лиза проблемной ситуации и включает описание метода и проблемной ситуа­ции. Третий этап - этап генерации идей. Каждый из участников имеет право выступать много раз. Критика предыдущих выступлений и скептические заме­чания не допускаются. Ведущий корректирует процесс, приветствует усовершенствование или комбинацию идей, оказывает поддержку, освобождая участ­ников от скованности. Продолжительность мозгового штурма рекомендуется не менее 20 мин и не более 1 ч в зависимости от активности участников. Четвер­тый этап связан с систематизацией идей, высказанных на этапе генерации. Фор­мируется перечень идей, выделяются признаки, но которым идеи могут быть объединены, идеи объединяются в группы согласно выделенным признакам. На пятом этапе осуществляется деструктурирование (разрушение) систематизиро­ванных идей. Каждая идея подвергается всесторонней критике со стороны группы высококвалифицированных специалистов. Группа формируется в коли­честве 20 - 25 человек. На шестом этапе дается оценка критических замечаний и составляется список практически реализуемых идей. Этот метод позволяет качественно и достаточно быстро проводить оценку вариантов развития объек­та прогнозирования.

Метод "635" - это одна из разновидностей "мозговой атаки". Цифры 6, 3, 5 обозначают следующее: 6 участников, каждый из которых должен записать 3 идеи в течение 5 мин. Лист ходит по кругу. Таким образом, за полчаса каждый запишет в свой актив по 18 идей, в общей сложности - 108. Структура идей четко определена. Возможны модификации метода. Этот метод широко исполь­зуется в зарубежных странах (особенно в Японии) для отбора из множества идей наиболее оригинальных и прогрессивных по решению определенных проблем.

Метод "Дельфи". Одна из первых попыток разработать более обоснован­ную и строгую процедуру при экспертном прогнозировании была предпринята Т. Гордоном и О. Хелмером - сотрудниками одной из корпораций США, кото­рые в 1964 г. опубликовали результаты обобщения и статистической обработки мнений специалистов относительно перспектив развития в ряде областей нау­ки. Этот метод получил широкую известность под названием метод "Дельфи'. Используется он при прогнозировании развития науки и техники, инвестиций и других аспектов.

Цель метода "Дельфи" - разработка программы последовательных много-туровых индивидуальных опросов. Проводится индивидуальный опрос экспер­тов обычно в форме анкет-вопросников. Затем осуществляется статистическая их обработка на ЭВМ и формируется коллективное мнение группы, выявляют­ся и обобщаются аргументы в пользу различных суждений. Обработанная па ЭВМ информация сообщается экспертам, которые могут корректировать оцен­ки» объясняя при этом причины своего несогласия с коллективным. Эта проце­дура может повторяться до 3 - 4 раз. В результате происходит сужение диапа­зона оценок и вырабатывается согласованное суждение относительно перспек­тив развития объекта.

Особенности метода "Дельфи":

а) анонимность экспертов. Участники экспертной группы неизвестны друг другу. Взаимодействие членов группы при заполнении анкет полностью исключается;

б) возможность использования результатов предыдущего тура опроса;

в) статистическая характеристика группового мнения.

Этот метод помогает предопределить развитие проблемных ситуаций, но­сящих долгосрочный характер. Наши специалисты, работающие в области научно-технического прогнозирования, также разрабатывают методы обра­ботки экспертных оценок. Они носят название эвристических.

Метод "комиссий" - это один из разновидностей методов экспертных оценок, основанный на работе специальных комиссий. Группы экспертов за "круглым столом" обсуждают ту или иную проблему с целью согласования то­чек зрения и выработки единого мнения. Недостаток этого метода заключается в том, что группа экспертов в своих суждениях руководствуется в основном ло­гикой компромисса.

Метод написания сценария основан на определении логики процесса или явления во времени при различных условиях. Он предполагает установление последовательности событий, развивающихся при переходе от существующей ситуации к будущему состоянию объекта. Своеобразным сценарием может быть описание последовательности и условий международной интеграции хо­зяйства стран, включающее следующие вопросы: от каких простейших форм к более сложным должен пройти этот процесс; как он повлияет на национальное хозяйство и экономические связи стран; каковы финансовые, организационные, социальные, юридические проблемы, которые могут возникнуть в ходе интер­национализации хозяйства.

Прогнозный сценарий определяет стратегию развития прогнозируемого объекта. Он должен отражать генеральную цель развития объекта, критерии для оценки верхних уровней "дерева целей", приоритеты проблем и ресурсы для достижения основных целей. В сценарии отображаются последовательное решение задачи, возможные препятствия. При этом используются необходимые материалы по развитию объекта прогнозирования.

Сценарий должен быть написан так, чтобы после ознакомления с ним стала ясна генеральная цель проводимой работы в свете социально-экономиче­ских задач па прогнозируемый период. Он обычно носит многовариантный ха­рактер и рассматривает три лилии поведения: оптимистическую - развитие си­стемы в наиболее благоприятной ситуации; пессимистическую - развитие си­стемы в наименее благоприятной ситуации; рабочую - развитие системы с уче­том противодействия отрицательным факторам, появление которых наиболее вероятно. В рамках прогнозного сценария целесообразно прорабатывать ре­зервную стратегию на случай непредвиденных ситуаций.

В разработке сценария принимает участие группа специалистов Поэтому всегда возникает неопределенность, связанная с субъективностью их суждений. Ценность сценария тем выше, чем меньше степень неопределенности, т.е. чем больше степень согласованности мнений экспертов.

Сценарий в готовом виде должен быть подвергнут анализу. На основании анализа информации, признанной пригодной для предстоящего прогноза, фор­мулируются цели, определяются критерии, рассматриваются альтернативные решения.

Широко используется при анализе и прогнозе систем прогнозный граф и "дерево целей". Графом называют фигуру, состоящую из точек-вершин, соеди­ненных отрезками-ребрами. "Дерево целей" - это граф-дерево, выражающее от­ношение между вершинами-этапами или проблемами достижения цели. Каждая вершина представляет собой цель для всех исходящих для нее ветвей.

"Дерево целей" предполагает выделение нескольких структурных или иерархических уровней. Каждая цель верхнего уровня должна быть представле­на в виде подцелей следующего уровня таким образом, чтобы объединение по­нятий подцелей полностью определяло понятие исходной цели.

Построение "дерева целей" требует решения многих прогнозных задач: прогноза развития объекта в целом; формулировки сценария прогнозируемой цели, уровней и вершин "дерева целей"; критериев и их весов в ранжировании вершин. Эти задачи могут решаться при необходимости методом экспертных оценок. Следует отметить, что данной цели как объекту прогноза может соот­ветствовать множество разнообразных сценариев.

Метод морфологического анализа предполагает выбор наиболее прием­лемого решения проблемы из числа возможных. Его целесообразно использо­вать при прогнозировании фундаментальных исследований. Метод морфологи­ческого анализа включает ряд приемов, предполагающих систематизированное рассмотрение характеристик объекта. Исследование проводится по методу "морфологического ящика", который строится в виде дерева целей или матри­цы, в клетках которых помещены соответствующие параметры. Последователь­ное соединение одного какого-либо параметра первого уровня с одним из пара­метров последующих уровней представляет собой одно из возможных решений проблемы. Общее количество возможных решений равно произведению числа всех параметров, представленных в "ящике", взятых по строкам. Путем пере­становок и различных сочетаний можно выработать вероятностные характери­стики объектов.