3.3. Критериально-ориентированный подход в педагогических измерениях

При критериально-ориентированном подходе в педагогических измерениях результаты испытуемых интерпретируются по отношению к содержательной области или требованиям (например, в форме компетенций), установленным к учебным достижениям. Балл каждого обучающегося подсчитывается путем перевода в проценты доли правильно выполненных заданий по отношению к общему числу заданий теста (для дихотомических оценок (1 или 0) по отдельным заданиям) либо отношения суммарного балла по правильно выполненным заданиям к общему числу баллов по всем заданиям теста (для политомических оценок (0, 1,2 и т.д) по отдельным заданиям). В компетентностном подходе результаты испытуемых сравниваются с пороговыми баллами, устанавливающими критерии освоения компетенций.

Таким образом, при критериально-ориентированном подходе создаются тес­ты для сопоставления учебных достижений каждого обучающегося с планируемым к усвоению объемом знаний, умений или компетенций. В качестве интерпретационной системы отсчета используется конкретная область содержания, а не та или иная выборка обучающихся, поэтому критериально-ориентированные тесты необходимо использовать в связи с введением компетентностного подхода при оценке качества результатов обучения обучающихся в процессе промежуточной и итоговой аттестации.

В целом, с помощью критериально-ориентированных тестов благодаря содержательной интерпретации результатов тестирования можно:

• выявить освоенные и не освоенные знания, умения, навыки и компетенции, скорректировать индивидуальную образовательную траекторию каждого обучающегося и повысить индивидуализацию учебного процесса;

• ранжировать тестируемых по проценту выполнения и построить рейтинговые шкалы;

• разбить испытуемых на две группы с помощью одного критериального балла (компетентных и некомпетентных);

• разбить испытуемых на несколько групп с помощью нескольких критериальных баллов и провести развернутый анализ не освоенных разделов содержания или компетенций.

Нормативно-ориентированный и критериально-ориентированный подходы не имеют тех различий, которые могут быть выявлены путем обычного осмотра заданий тестов. Углубленный анализ существен­ных характеристик тестов, разработанных в рамках различ­ных подходов, указывает на ряд особенностей. Нормативно-ориентированные и критериально-ориентированные тесты отличаются по целям создания, методике отбора содержания, характеру распределения эмпирических результатов тестирования и методам их обработки, критериям качества тестов и тестовых заданий, а, главное, по интерпретации результатов испытуемых, выпол­нивших тест.

В частности, содержание критериально-ориентированного теста должно быть достаточно полно, в него включают все то, что условно можно принять за 100% объем, планируемый к усвоению. Содержание нормативно-ориентированного теста фрагментарно, в нем могут быть только те разделы, которых достаточно для сравнения и дифференциации обучающихся по уровню учебных достижений. Нормативно-ориентированные тесты обычно имеют от 50% до 70% заданий примерно средней трудности, т.е. тех, которые смогла выполнить правильно приблизительно половина тестируемых обучающихся (рис. 3.3.1).

Рис. 3.3.1. Распределение заданий по трудности в нормативно-ориентированном тесте

В критериально-ориентированных тестах, используемых для аттестации, основная часть заданий намного легче, особенно в тех случаях, когда стараются спланировать процент двоек и ограничить число не аттестованных обучающихся. Например, если процент двоек не должен быть больше десяти и критерий отсева неуспевающих хотят установить на уровне 70% (все, кто выполнил меньше 70% заданий теста, получают неудовлетворительно), то в тест необходимо включить не менее 70% легких заданий, которые смогут выполнить правильно 90% тестируемых обучающихся (рис. 3.3.2).

Рис. 3.3.2. Распределение заданий по трудности в критериально-ориентированном тесте

В силу того, что распределения сырых баллов испытуемых по нормативно-ориентированным и критериально-ориентированным тестам имеют, как правило, различную форму, приходится использовать отличающиеся методы оценивания надежности и валидности результатов педагогических измерений, методики шкалирования и выравнивания.

Наиболее существенные отличия между нормативно-ориентированными и критериально-ориентированными тестами сведены в табл. 3.3.1.

Таблица 3.3.1

Отличия между нормативно-ориентированными и критериально-ориентированными тестами

Характеристики	Нормативно-ориентированные тесты	Критериально-ориентированные тесты
Типичное среднее число обучающихся, выполнивших правильно почти все задания теста	5% - 10%	80% - 90%
Область для сравнения результатов а обучающихся	Результаты других обучающихся	Содержательная область или совокупность видов учебной деятельности
Диапазон охвата целей проверки	Широкий, охватывает многие цели и виды учебной деятельности	Узкий, обычно охватывает несколько целей контроля
Репрезентативность охвата содержания предмета	Умеренная, фрагментарная – обычно включают не все разделы	Большая, обычно включают все то, что можно операционализировать и принять за 100%
Разброс результатов обучающихся (вариативность баллов)	Высокий, поскольку основная цель тестирования – дифференциация испытуемых по уровню подготовки	Низкий, внутри результатов группы обучающихся, прошедших за критерий, почти нет вариативности
Подбор заданий по трудности	Распределение оценок трудности близко к нормальному. Основная часть заданий имеет трудность 40% - 60%	Распределение скошенное. Основная часть заданий имеет трудность 80% - 90%