7. Организация Экспертизы

Теоретической базой для педагогической экспертизы являются методы экспертных оценок.

Экспертная деятельность может быть рассмотрена в качестве особого типа исследовательской деятельности, где объектом изучения является развивающаяся педагогическая практика.

Экспертиза инновационных разработок в сфере образования имеет, по крайней мере, три цели:

1. Оценка степени соответствия рассматриваемых материалов не­которым нормативным моделям (либо существующим традициям), выраженная в совокупности общих, специальных и частных критериев.

2. Понимание авторского замысла, исходной проектной идеи: выявление ее мировоззренческого контекста, целевых ориентации проекта и его ценностно-смысловых оснований.

3. Оценка деятельности проектировщиков по проработке инновационного проекта, приращению их профессионального мастерства (потенциала участников), а также оценка деятельности по реализации про­екта (степени реализации проекта).

Заказ на экспертную деятельность возникает, когда происходит существенное изменение педагогической деятельности - развивается инновационная педагогическая практика. И тогда перед разработчиками встает ряд вопросов.

Что предполагается сделать или что нового происходит в педагогической деятельности? В чем сущность того нового, что делается в образовательной практике в сравнении с прежним? Какую проблему можно снять, если работать по-новому?

Отвечая на первый вопрос, педагоги или педагогическое сообщетво осуществляют концептуализацию инновационной идеи, разрабатывают концепцию инновационной деятельности.

После разработки концепции или концептуализации инновационной идеи необходимо выявить новизну измененной образовательной практики. Коллективом разрабатывается круг проблем, строится гипотеза развития образовательной практики, определяются способы решения и снятия выделенных проблем, а также направления дальнейшей дея­тельности. Рассматриваются варианты решения той или иной пробле­мы или того, как одни управленческие решения могут отразиться на других ранее принятых решениях, каков оптимальный вариант взаимо­действия структурных элементов этой новой деятельности.

Ситуация, в которой возникает необходимость проведения экспертизы образовательного учреждения, характеризуется наличием инно­вационной педагогической деятельности. То есть, когда педагогиче­ский коллектив учреждения начинает делать нечто новое, отличное от общеизвестного, или переносит известную практику в новые условия.

В этом случае привычные критерии и стандартные способы оценки педагогической практики уже не являются адекватными, а новые, как правило, еще не отработаны или не до конца осознаны. Поэтому экспертиза не может осуществляться как инспекторская проверка, в ходе которой выясняется соответствие инновационной деятельности уста­новленным нормам и стандартам, поскольку образовательные стандарты не могут отражать содержание инновации.

Экспертиза предполагает определенную структуру, которую можно представить следующим образом: цель экспертизы - оценка какого-либо дей­ствия, процесса, случившегося либо текущего или который только предпола­гается совершить или создать; оценка качества продукта или проекта по оп­ределенным результатам; объект экспертизы - деятельность по разработке, реализации проекта или вещественные характеристики, результат проектной деятельности; предмет экспертизы - документы, описанные результаты, прак­тическая деятельность, опыт; средства экспертизы - как интуитивные, так и сложившиеся или сформированные в результате опыта; процедура экспертизы - соорганизация опытных специалистов (экспертов); продукт экспертизы - заключение экспертов после согласования по параметрам (критериям), предложенным для экспертизы (1,8).

Процедура экспертизы в зависимости от ее объекта может проводиться в нескольких формах. Это: индивидуальная экспертиза, коллек­тивная, комплексная.

Индивидуальная экспертиза может проводиться отдельным специалистом-профессионалом по конкретному предметному направле­нию содержания в соответствии с уже существующими нормативами или специально разработанными критериями. Примером может слу­жить экспертиза образовательной программы учебного заведения, кон­цепции, учебного плана, программы.

Коллективная экспертиза предполагает коллективную оценку группой профессионалов представленных инновационных продуктов, ког­да требуется совместное обсуждение и оценка новых, спорных или вызывающих сомнение составляющих экспертируемого объекта.

Комплексная экспертиза - экспертиза миогопредметная или многопрофессиональная, когда инновационный продукт разработан на сты­ке различных наук и требует компетентной оценки специалистов раз­личных направлений. Эта экспертиза предполагает специально разра­ботанную технологию ее организации и проведения, требующую до­полнительного согласования специалистов различных направлений.

Этапы проведения экспертизы. Оценка любых инновационных процессов и объектов включает в себя несколько этапов:

• целеполагающий, на котором необходимо сформировать и обо­ сновать задачу экспертизы, определить ее специфические особенности, выделить показатели экспертирования, выбрать тип экспертизы и критерии оценки;

• проектирующий, на котором создается проект экспортирования в самом широком понимании этого слова. Как? Кто? Когда? Где? Зачем?;

• статистический, на котором собираются сведения об объекте экспертизы и его окружении, проводится систематизация полученных данных и их дальнейшая оценка;

• оценочный, на котором выносятся и обсуждаются решения по рассматриваемому объекту, составляется и выносится экспертное заключение.

Для проведения экспертизы инновационного проекта привлекает­ся специалист (эксперт), обладающий специальными знаниями. Выбор эксперта осуществляется с учетом того, в какой области или в каких областях знаний лежит предмет экспертизы (в образовательных технологиях, системе дополнительного образования, воспитании, управ­лении).

При выборе экспертов, независимо от характера объекта исследования, целесообразно учитывать такие качества эксперта, как: компетентность, заинтересованность, деловитость, креативность (способность решать творче­ские задачи), положительное отношение к экспертизе, отсутствие склонности к конформизму (чрезмерное следование авторитету), объективность, спо­собность к анализу, широту и конструктивность мышления, чувство коллекти­визма, самокритичность. Компетентность эксперта складывается из профес­сиональной компетентности, которая распространяется на объект исследо­вания (перспективы и направления разработки и развития инновационных проектов, принципы построения воспитательного процесса, характеристики инновационного развития учебного заведения) и экспертной (квалиметрической) компетентности, которая предполагает знакомство эксперта с мето­дологией экспертного решения по исследуемому инновационному проекту.

Для отбора экспертов на практике применяют четыре основных метода отбора экспертов: на основании самооценки: на основании результатов прошлой экспертной дея­тельности: на основании определения компетентности: на основа­нии оценки группой каждого специалиста -кандидата. Другие авто­ры говорят об использовании в квалиметрии пяти групп способов, с помощью которых оценивается качество эксперта, причем каж­дый из этих способов, как отмечает Г. Г. Азгальдов, характеризует несколько свойств эксперта. К этим способам относят: эвристи­ческие метопы опенки, статистические метопы оценки, тестовые методы, документальные (рейтинговые) методы оценки, комбини­рованные методы опенки.

Эвристические методы оценки, к которым относятся методы самооценки и взаимооценки, основаны на предположении, что представление у окружающих экспертов о данном эксперте достаточно правильно отражает его качество.

Статистические методы оценки экспертов основаны на предположении, что показания эксперта как своеобразного измерительного прибора имеют случайную и систематическую погрешности. К этой груп­пе относятся: отклонение индивидуальной экспертной оценки от коллективной и воспроизводимость индивидуальной оценки через опре­деленный промежуток времени.

Тестовые методы - получение экспертных оценок в результате специальных испытаний экспертов.

Документальные (рейтинговые) методы оценки основаны на предположении о том, что некоторые документальные данные (характеристики) об эксперте могут характеризовать его качество как экспер­та. Например: содержание и количество публикаций, участие в между­народных семинарах и симпозиумах, стаж педагогической и научной деятельности.

Комбинированные методы оценки основаны на некоем обобщении оценок, полученных разными методами.

Независимо от метода, используемого для отбора группы экспертов, целесообразно уделить внимание вопросу ее состава. Принято считать, что в группах с однородным составом экспертов бывает меньше расхождений между собой, быстрее происходит процесс согласова­ния группового решения.

Однако факт взаимного влияния мнений экспертов может привести и к нежелательным последствиям. В связи с этим, эксперты, участвующие в работе комиссии, должны обладать способностью высказывать мнения, не зависящие от мнений признанных авторитетов, от мнения большинства, должны уметь отказаться от своего публично высказан­ного мнения при выработке нового взгляда на проблему. Такие требо­вания, естественно, создают значительные трудности при выборе экс­пертов для работы в комиссии.

Процедура проведения экспертизы

Проведение экспертизы может быть представлено в следующей последовательности:

1. Регистрация заявки на экспертную деятельность.

2. Выбор и согласование экспертной группы.

3. Согласование сроков проведения экспертизы.

4. Проведение экспертизы и подготовка экспертного заключения по следующим пунктам:

• соответствие заявленной тематики инновационного проекта обозначенным в нем целям и начатым работам;

• наличие в проекте методов и форм и уровень их проработанности, а также соответствие их поставленным целям;

• социальная и культурная значимость инновации;

• анализ потенциальных возможностей коллектива в дальнейшей работе.

5. Определение возможных последствий реализации инновации в практику.

Организация и проведение экспертизы

1. Организационную основу экспертизы составляют отношения между ее субъектами - заказчиками, организаторами, исполнителями, взаимодействующими в рамках выполняемых ими Функций.

2. Заказчик устанавливает необходимость экспертизы, формулиру­ет задание на ее проведение по утвержденным формам и стандартам, обеспечивает своевременное финансирование на проведение экспертных работ и рассматривает представляемые ему официальные экспертные заключения.

3. Организатор разрабатывает программу проведения экспертизы, осуществляет поиск экспертов и заключает договора с ними, предоставляет в распоряжение экспертов объект экспертизы и необходимые методические материалы, оказывает комплексную (информационную, техническую, нормативно-правовую) поддержку в работе экспертов на всех ее этапах, подготавливает и представляет заказчику официальное экспертное заключение.

4. Исполнитель экспертизы (эксперт) изучает непосредственно представ­ ленный ему объект, формирует свою оценку данного объекта, подготавлива­ет и передает организатору экспертизы обоснованное заключение по всем вопросам, указанным в исходных (договорных) документах и заданиях.

5. По усмотрению заказчика или организатора экспертизы оценка сложных в том или ином отношении объектов может проводиться разными экспертами одновременно, независимо от последующего сопо­ставления полученных результатов.

6. Экспертное заключение служит основанием для приемки результатов экспертизы заказчиком и входит в перечень документов, рассматриваемых им при подготовке решений, в интересах которых про­водилась экспертиза.

7. Конкретное применение результатов проведенной экспертизы относится к компетенции ее заказчика, действующего в соответствии со своими полномочиями и существующим законодательством.

Примеры опросных листов и экспертных заключений, проводимых на некоторых конкурсах, представлены в Приложениях.

Форма и порядок представления результатов экспертизы

Экспертное заключение представляет собой грамотное решение, в котором характер объектов экспертирования, его критериальная база и техника экспертирования должны быть максимально полно раскрыты.

По результатам экспертной проверки экспертная группа составляет заключение, где должны найти свое отражение следующие положения:

• инновационный проект (идея) имеет реальный или фиктивный характер;

• в инновационном проекте представлена направленность на использование имеющегося опыта или на собственную разработку;

• стадия, на которой находится в данный момент инновация;

• значимость инновации с точки зрения важности решаемых в ней задач для региональной образовательной ситуации;

• общекультурная значимость проблем, вынесенных в задачи;

• предполагаемые последствия и время, требуемое для реализации. На основе заключения экспертизы инновационного проекта могут быть

вынесены рекомендации относительно научной поддержки и научного обеспечения, методологического и методического обеспечения, образовательной поддержки, финансового обеспечения и других форм обес­печения, статуса экспериментальной площадки различных уровней.

Дополнительное финансирование и иная поддержка инновационных проектов и практик могут осуществляться органами управления образованием на основании рассмотрения ими заключения экспертной комис­сии и принятия соответствующих управленческих решений в случае со­гласия органов управления с экспертными рекомендациями. На основе решения может быть разработан договор школы с органом управления образованием, в котором будут фиксироваться взаимные обязательства по реализации хода эксперимента, промежуточные результаты иннова­ции, их финансовое, кадровое, материальное и организационно-право­вое обеспечение (в целом или по отдельным частям инновационных разработок), а также взаимные права в области интеллектуальной соб­ственности и использования педагогических находок и изобретений.