Краткие теоретические сведения

Одним из путей повышения эффективности системы контроля и оценки качества учебной работы, управления учебной деятельностью учащихся и качества обучения является использование различных форм контроля знаний и умений (компетенций) учащихся.

Цель контрольно-оценочных процедур заключается в том, чтобы проследить динамику формирования у обучающихся профессиональных знаний и умений, установить уровень обученности и профессиональной подготовки выпускников, адекватность этого уровня требованиям федеральных государственных образовательных стандартов (ФГОС), рынка труда, работодателей.

В профессиональной педагогике сформировались определенные требования, предъявляемые к контролю знаний, умений и навыков, которые включают полноту, всесторонность, систематичность и объективность, обеспечение обучающего, воспитывающего и развивающего влияния контроля, дифференцированный подход к проведению контрольно-оценочных процедур.

В настоящее время в образовательных учреждениях системы начального профессионального образования (НПО) общепризнанным подходом при оценке качества обучения является уровневая модель усвоения знаний и структуры деятельности, предложенная академиком В.П. Беспалько:

1 уровень – ученический: узнавание, то есть репродуктивное действие с подсказкой – заданы цель, действия и ситуация;

2 уровень – алгоритмический: репродуктивное действие по памяти – заданы цель и ситуация;

3 уровень – эвристический: выполнение продуктивной деятельности на некотором множестве объектов, создание учащимися субъективно новой для себя информации;

4 уровень – творческий: выполнение продуктивной деятельности, результат которой – создание объективно новой информации.

Для проверки усвоения знаний на различных уровнях используют тестовые задания. Они удобны в использовании и позволяют охватить большой объем пройденного материала.

Существует множество различных определений теста:

• Тест (от англ. test - испытание, проверка) - стандартизованные, краткие, ограниченные во времени испытания, предназначенные для установления количественных и качественных индивидуальных различий;

• Тест - это стандартизованное задание, по результатам выполнения которого дается оценка уровня знаний, умений и навыков испытуемого;

• Педагогический тест - это система заданий специфической формы, позволяющая измерить уровень обученности студентов, совокупность их представлений, знаний, и навыков на той или иной области содержания.

Педагогический тест рассматривается именно как система, как упорядоченное множество тестовых заданий. Задания - это те элементы, "кирпичики" из которых составляется педагогический тест. Педагогический тест, в большинстве случаев, не требует квалифицированных преподавателей для проверки результатов тестирования. Педагогический тест, как правило, не требует большого количества учебного времени на его проверку.

Впервые в 1864 г. тесты начал применять Дж. Фишер в Великобритании для проверки знаний учащихся. Хотя родоначальником тестового движения считают известного английского ученого Френсиса Гальтона. Именно он разработал теоретические основы тестирования.

Тест состоит из задания, которое выдаётся учащемуся, и эталона ответа, который остаётся у преподавателя.

Эталон – это правильный и полный ответ или метод выполнения заданной деятельности.

Наглядным выражением структуры теста может быть следующая запись:

Т (тест) = З (задание) + Э (эталон).

Педагог, сверяя пооперационно ответ учащегося с эталоном, приходит к выводу о качестве выполнения теста. Тест, лишенный эталона, превращается в обычное задание, решение о качестве выполнение которого, принимается на основе субъективного мнения преподавателя.

По эталону легко определяется число операций (р), ведущих к решению теста. Сравнение ответа учащегося с эталоном по числу правильно выполненных учащимися операций (а) теста даёт возможность определить коэффициент усвоения (к)

К = а / р, где 0≤ К≤1

Коэффициент усвоения поддаётся нормировке и легко сопоставляется с любой шкалой оценки. По этому коэффициенту судят о завершенности процесса обучения. Исследования показывают:

если К≥ 0,7 – процесс обучения можно считать завершенным,

если К≤ 0,7 – учащийся будет совершать в последующей деятельности систематически ошибки и не способен к их исправлению, то есть переходить к изучению нового материала нельзя.

Известный тестолог В.С. Аванесов выделяет следующие «…пять основных преимуществ:

1. Высокая научная обоснованность самого теста, позволяющая получать объективированные оценки уровня подготовленности испытуемых;

2. Технологичность тестовых методов;

3. Точность измерений;

4. Наличие одинаковых, для всех пользователей, правил проведения педагогического контроля и адекватной интерпретации тестовых результатов;

5. Сочетаемость тестовой технологии с другими современными образовательными технологиями».

Данные достоинства можно дополнить положительными сторонами:

1. Широкий охват материала;

2. Быстрота контроля знаний учащихся (одновременно тестируется вся группа);

3. Малая вероятность пользования шпаргалкой.

К недостаткам можно отнести:

1.Формальность (трудно сформулировать вопросы, требующие размышлений);

2.Отсутствие непосредственного контакта между педагогом и учащимся.

Принципы отбора содержания тестов:

• значимость (в задание включаются наиболее важные ключевые, сущностные знания и умения, необходимые учащимся);

• научная достоверность (в задания включается только то, что является объективно истинным. Спорные истины не включаются в задание. Содержание теста или тестового задания должно соответствовать уровню современного состояния науки и техники);

• репрезентативность (следует включать не только значимые элементы содержания, но и обращать внимание на полноту и их достаточность для контроля);

• возрастающая трудность (в начале теста рекомендуется давать более легкие задания, чтобы учащийся на них мог ответить правильно. Тогда у него появится вера в себя, и он лучше выполнит все остальные задания);

• вариативность содержания (содержание теста не может оставаться неизменным из года в год, от контроля к контролю);

• системность содержания (подбираются задания, отвечающие требованиям системности знаний);

• комплектность и сбалансированность содержания теста (тест, разработанный для итогового контроля знаний, не может состоять из материала только одной темы, даже если эта тема является самой ключевой в учебной дисциплине);

• руководство дидактическими принципами при отборе содержания (принцип доступности, последовательности, системности и т.д.).

При проектировании тестовых заданий нужно руководствоваться принципами отбора содержания, а также к заданиям в тестовой форме тестологи предъявляют следующие формальные требования:

• краткость;

• правильность выбора формы;

• логическая форма высказывания;

• одинаковость правил оценки ответов;

• наличие определенного места для ответов;

• правильность расположения элементов задания;

• одинаковость инструкции для всех испытуемых;

• адекватность инструкции форме и содержанию задания.

Также можно выделить общие требования, которые необходимо соблюдать при составлении тестов:

• каждое задание имеет свой порядковый номер, установленный согласно объективной оценке трудности задания и выбранной стратегии тестирования;

• задание формулируется в логической форме высказывания, которое становится истинным или ложным в зависимости от ответа студента;

• к разработанному заданию прилагается правильный ответ;

• для каждого задания приводится правило оценивания, позволяющее интерпретировать ответ студента как правильный или неправильный;

• на выполнение одной задачи (вопроса) тестового задания у студента должно уходить не более 2-5 минут;

• все инструкции к одной форме даются одними и теми же словами;

• заранее разработанная система подсчета баллов применяется ко всем испытуемым студентам одинаково;

• все испытуемые отвечают на задания одинаковой сложности.

Инструкция для испытуемых, выполняющих тест, должна быть предельно простой и понятной, иначе некоторые испытуемые не смогут ее понять и из-за этого получить плохие результаты. Инструкция должна быть:

- краткой;

- сформулирована просто, с использованием коротких предложений без уточняющих придаточных предложений;

- иметь примеры, поясняющие алгоритм прохождения теста.

Конструирование теста начинают с определения целей тестирования. Затем отбирают содержание теста. На этом этапе перед разработчиком встает ряд вопросов: какие задания включать? какое количество заданий будет необходимым и достаточным для адекватного отражения содержания темы раздела, учебной дисциплины)? соответствует ли содержание теста целям тестирования? и т.д.

Поскольку в тестах почти всегда используется ограниченное количество заданий, необходимо чтобы эти задания однозначно показывали знания и умения учащихся по предмету (разделу, теме). Для этого разработчик составляет технологическую матрицу с информационной характеристикой теста. Технологическая матрица показывает содержание фрагментов темы (в виде учебных элементов - УЭ), какое содержание какими заданиями теста проверяется, сведения о важности учебного элемента по частоте использования в тесте. Наглядное «покрытие» учебных элементов тестовыми заданиями дает возможность увидеть мощность задания и время его выполнения (табл.1).

При составлении матрицы покрытия очень важно, какие учебные элементы заложены в матрицу. Если это итоговый контроль, то проще всего взять разделы или темы. Если текущий контроль, то внутри темы необходимо выделить фрагменты и выявить среди них опорные понятия, установить уровень усвоения учебного материала.

Таблица 1- Матрица покрытия учебных элементов (УЭ) заданиями теста

Номер тестового задания	Содержание темы (раздела)								Информационная мощность	Время, мин
	УЭ 1	УЭ 2	УЭ 3		УЭ 4		УЭ 5
1	+								1	0,5
2		+		+					2	1,5
3				+					1	1
4	+					+			2	2
5						+		+	2	2
…	…	…		…		…		…	…	…
20		+				+		+	3	4
Важность УЭ по частоте использования в тесте	5	5		7		5		4	26	30

Информационная мощность – справочный раздел, указывает на количество УЭ, знание которых проверяет данное тестовое задание.

Время, отводимое на решение каждого задания и теста в целом, зависит от характеристик задания: от информационной мощности, формы тестового задания, числа логических операций в задании, субъективной трудности.

Важность УЭ по частоте использования в тесте показывает, в скольких тестовых заданиях проверяется знание сведений из этого учебного элемента. На этапе планирования теста необходимо сравнить важность учебных элементов по частоте использования в тесте и их объективную важность, так как может случиться так, что в тесте совершенно необоснованно будет отдано предпочтение проверке каких-либо отдельных тем и фрагментов.

Контролировать усвоение учебного материала (по уровням усвоения) возможно не только за счет варьирования содержания тестовых заданий, но и за счет использования различных форм тестовых заданий.

Существует множество видов тестов (по форме, по уровню усвоения). Рассмотрим те формы тестовых заданий, которые часто применяются в НПО и СПО. Необходимо помнить, что выбор формы зависти от содержания курса и целей контроля. Основными формами являются следующие четыре:

• задания закрытой формы (обучаемые выбирают правильный ответ из набора ответов к тексту тестового задания);

• задания открытой формы (при выполнении требуют самостоятельного формулирования ответа);

• задание на соответствие (выполнение связано с установлением соответствия между элементами двух множеств);

• задания на установление правильной последовательности (от испытуемого требуется указать порядок действий или процессов, перечисленных преподавателем).

Для дальнейшего проектирования тестовых заданий кратко рассмотрим вышеуказанные четыре формы тестов. Также приведем примеры тестовых заданий различных уровней.

Задания закрытой формы

В задании можно выделить основную часть утверждения, содержащую постановку проблемы, и готовые ответы, сформулированные преподавателем. Среди ответов правильным бывает один или несколько вариантов. Число неправильных ответов определяется видом задания и не превышает пяти.

Еще ряд требований к заданиям закрытой формы:

• в тексте задания должна быть устранена всякая двусмысленность или неясность формулировок;

• в основную часть задания следует включать как можно больше слов, оставляя для ответа не более двух-трех наиболее важных и ключевых слов для данной проблемы;

• частота выбора одного и того же номера правильного ответа в разных тестовых заданиях должна быть примерно одинакова, либо номер правильного ответа выбирается в случайном порядке;

• из числа неправильных исключаются ответы, вытекающие один из другого.

Задания закрытой формы сопровождаются инструкцией: «Обведите номер правильного ответа». При компьютерной выдачи заданий используют инструкцию: «Наберите номер правильного ответа».

Задания открытой формы

При ответе на открытое задание студент дописывает пропущенное слово, формулу или число на месте прочерка. Требования следующие:

• задание составляется на четкий и однозначный ответ и не допускает двоякого толкования;

• прочерк ставится на месте ключевого термина, знание которого является существенным для контролируемого материала;

• все прочерки в открытых заданиях для одного теста рекомендуется делать равной «длины»;

• необходимо упрощать усложненные синтаксические конструкции.

Для задания открытой формы рекомендуется использовать инструкцию, состоящую из одного слова: «Дополните предложение, вписывая недостающие по смыслу слова».

Задания на соответствие

В этих заданиях преподаватель проверяет знание связей между элементами двух множеств (явление и его название, физическая величина и единица измерения, факт и причина возникновения).

Требования к заданиям на соответствие:

• с одной стороны (слева) приводятся элементы данного множества, с другой (справа) - элементы, подлежащие выбору (причем число элементов второго множества может превышать число первого множества);

• необходимо подбирать правдоподобные элементы во втором множестве (эффективность задания будет существенно снижена, если неправдоподобные элементы легко различаются испытуемыми).

К заданиям предлагается стандартная инструкция, состоящая из двух слов: «Установите соответствие информации в двух колонках».

Задания на установление правильной последовательности

Тестовые задания предназначены для оценивания уровня владения последовательностью действий, процессов, вычислений, логики событий и т.д.

В задании в произвольном случайном порядке приводятся действия или процессы, связанные с определенной задачей. Испытуемый должен установить правильный порядок предложенных действий и указать его с помощью цифр.

Стандартная инструкция к таким заданиям имеет вид «Установите правильную последовательность…».

При выборе формы тестового задания необходимо помнить о том, что каждой дисциплине присуще свое собственное содержание, отличное от других. Поэтому нет и не может быть единых рекомендаций для правильного выбора формы. Многое здесь зависит от искусства преподавателя, от его опыта и умения разрабатывать задания теста.

Чтобы исключить возможность списывания, подсказки и других нарушений, в заданиях следует вводить переменные параметры, изменение которых в допустимых пределах обеспечивает многовариантность каждого задания теста. При этом все группы выполняют однотипные задания, но с разными значениями параметра и, соответственно, с разными ответами. Таким образом, решаются одновременно две задачи: устраняется возможность списывания и обеспечивается параллельность вариантов заданий, предлагаемых испытуемым.