1.2Виды компьютерного тестирования

–централизованное тестирование по контрольным материалам, разработанным в соответствующих УМО, ассигнованных министерством центрах;

–аттестационное тестирование (при самообследовании, подтверждение государственной лицензии);

–итоговое тестирование по оценке соответствия полученных в процессе обучения знаний по конкретной дисциплине требованиям государственного образовательного стандарта;

–рубежное и текущее тестирование по оценке подготовленности в процессе изучения дисциплины;

–оценка остаточных знаний обучаемых.

Методом компьютерного контроля/тестирования можно получить объективную, оперативную, достоверную информацию о знаниях, полученных в процессе обучения и о готовности обучаемых к восприятию нового материала.

Компьютерное тестирование имеет ряд преимуществ:

–обеспечение стандартизации;

–обеспечение индивидуальности процедуры контроля;

–повышение объективности контроля и исключения субъективных факторов (усталость преподавателя и его эмоциональность или плохое настроение,

отсутствие или недостаточность времени для личного общения с преподавателем, другое);

–оперативность статистической обработки результатов контроля; – доступность для обучающегося к полной информации о результатах контроля;

– обеспечение возможности преподавателю быстрой проверки знаний большого количества обучаемых по разным темам, выполнению заданий, дисциплине в комплексе;

– освобождение преподавателя от выполнения повторяющейся трудоёмкой и рутинной работы по организации массового контроля, высвобождение времени для творческого совершенствования разных аспектов его профессиональной деятельности;

–обеспечение всесторонней и полной проверки;

– обеспечение возможности обучающемуся самопроверки освоения материала в том режиме работы как это ему удобно (сетевой режим доступа к контролирующим системам и измерительным материалам);

– доступности и равноправия всех участников процедуры тестирования.

Компьютерное тестирование имеет ряд недостатков, выделим два основных:

–исключение из процедуры контроля устного речевого компонента;

–снижение потребности выбора главного в прочитанном. Рафинированное представление задания не способствует развитию личности.

1.3Разработка контрольных заданий для компьютерного тестирования

Самой сложной задачей эксперта по компьютерному тестированию является задача разработки тестов, которые позволяют максимально объективно оценить уровень соответствия или несоответствия личностной модели знаний ученика и экспертной модели знаний. Разработка тестовых материалов для любой формы контроля (бланкового или компьютерного) должна удовлетворять определенным принципам, выработанным требованиям, правилам оформления и удовлетворять требованиям экспертов по оценке тестовых заданий.

1.3.1Требования, предъявляемые к контролирующим заданиям

К основным требованиям, предъявляемым к любым контролирующим заданиям, в том числе и для компьютерного тестирования, обычно относят следующие:

- валидность;

- определенность (общепонятность);

- однозначность;

- понятный язык изложения;

- доступность;

- простота;

- краткость заданий;

- обоснованность эталона ответа;

- надежность.

Валидность теста - это адекватность. Различают содержательную и функциональную валидность: первая - это соответствие теста содержанию контролируемого учебного материала, вторая - соответствие теста оцениваемому уровню деятельности.

Требование определенности теста необходимо для однозначное понимания обучающимся того, что он должен выполнить.

Однозначность следует рассматривать в двух аспектах:

1 – однозначность содержательная, что необходимо для понимание теста всеми участниками процесса тестирования именно только так как написано;

2 – однозначность оценки качества выполнения теста, т.е. единство правил оценки ответов в рамках принятой формы.

Понятный язык изложения. Тестовое задание должно иметь ясный смысл, исключающий какие-либо другие толкования или интерпретации. Должны исключаться малопонятные и редко употребляемые слова, а также неизвестные символы, иностранные слова, затрудняющие восприятие смысла.

Требование простоты теста означает, что тест должен иметь одно задание одного уровня, т.е. не должен быть комплексным и состоять из нескольких заданий разного уровня.

Краткость заданий. Способ представления теста. Краткость заданий должна обеспечиваться тщательным анализом содержания каждого слова, символа, их толкования в словарях русского языка и иностранных слов, в различных энциклопедиях и т.д.

Обоснованность эталона ответа на тестовое задание.

Эталон ответа на тестовое задание разрабатывается заранее опытным преподавателем и согласовывается с научно-методической комиссией при кафедре (факультете), методической комиссии. Эталон ответа – это краткое суждение, связанное как по содержанию, так и по форме с содержанием задания.

Понятие надежности тестирования определяют как, вероятность правильного измерения величины. Требование надежности заключается в обеспечении устойчивости результатов многократного тестирования одного и того же испытуемого. Надежность теста или батареи тестов растет с увеличением количества осуществляемых операций.

При организации тестирования ни одному испытуемому не дается никаких преимуществ перед другими испытуемыми. Все отвечают на задания, которые охватывают учебные элементы, составляющие основу структуры содержания обучения по данной специальности, всем дается одинаковое время. Правила оценки выполнения задания определяются заранее и абсолютно одинаково должны применяться ко всем испытуемым.

При создании таких тестов встают некоторые вопросы:

1) Сколько заданий нужно включить в тест для надёжной оценки достижения каждой из конкретных учебных целей?

2) Какая доля заданий должна быть выполнена правильно для надёжного установления владения предметом?

Оценочные процедуры или анализ субъективных оценок экспертами создаваемых контрольно-измерительных материалов более полезны на начальном и заключительном этапах конструирования теста.

Тест должен быть снабжен оценочной шкалой, сопровождаемой четкой инструкцией для пользователя.

Тесты обладают таким свойством, что по их результатам можно сравнивать всех испытуемых в группе. Системы оценивания должны вытекать из целей тестирования. Для тестов, ориентированных на критерий, считается важным, что испытуемый, превысивший его, считается успешным в выполнении тестового задания.

Для нормативно-ориентированных тестов основанием для сравнения тестовых показателей являются статистические нормы. Особенно важно подобное сравнение при текущем, итоговом и рубежном контроле. Тестовые оценки, как правило, следует переводить в пятибалльную систему. Обычно перевод осуществляется по следующей схеме:

- оценка 5 (отлично) выставляется испытуемым за верные ответы, которые составляют 91 % от общего количества вопросов;

- оценка 4 соответствует работе, которая содержит от 71 % до 90 %

правильных ответов;

- оценка 3 соответственно от 70 % до 50 % правильных ответов;

- работа, содержащая менее 50 % правильных ответов оценивается как неудовлетворительная.

Обычно, трудность задания определяется в процентах (долях) лиц, давших на него правильный ответ. Чем легче задание, тем выше процент справившихся с ним.

Трудность (сложность) является особенностью не только тестового задания, но и теста в целом. Тест может состоять как из простых субъектов, так и из сложных. В общем виде трудность (сложность) может быть субъективно-статистической.

Субъективная трудность задания зависит от наличествующего психологического барьера, который может быть обусловлен различными факторами. К ним относятся индивидуальные особенности во временных характеристиках выполнения умственных заданий, уровень сформированности мыслительной деятельности, индивидуально-психологического состояния испытуемого, отношения к процедуре тестирования и многие другие факторы.

Понятие интеллектуального индекса трудности задания:

а) тестовые задания, выполнимые в процессе мыслительных операций сравнения испытуемых, можно обозначить через низкий интеллектуальный индекс;

б) задания, представленные через мыслительные операции анализа, синтеза, обобщения (абстракции) оцениваются через средний интеллектуальный индекс;

в) задание, предполагающие их решение посредством мыслительной операции через классификацию, оцениваются через высокий интеллектуальный индекс;

г) творческие задания также подлежат оценке через высший интеллектуальный индекс.

Индивидуальный индекс теста, в целом, может быть представлен, например, в следующих долях (в соответствии с предложенной классификацией):

- 25 % заданий решаются посредством сравнения и выявления соответствия объектов или операций (низкий интеллект. индекс);

- 25 % заданий решаются посредством мыслительной операции

обобщения (средний интеллект. индекс);

- 25 % заданий на систематизацию и классификацию (высокий интеллект. индекс);

- 25 % заданий творческого характера (высший интеллект. индекс);

Таким образом, присвоение тестовым заданиям интеллектуального индекса сложности позволит представить процессуальную сторону мыслительной деятельности через процедуру тестирования.

Следует стремиться к созданию теста, задания которого обладают различительными интеллектуальными индексами.

Для нормативно-ориентированных тестов задания, трудность которых

меньше 20 % и больше 80 % , как правило, отрабатываются и заменяются новыми.

Определение дискриминативности заданий.

В теории тестов присутствуют несколько различных терминов, обозначающих возможность количественного оценивания качества задания. В зарубежной тестологии английские термины служат для обозначения способности задания дифференцировать учащихся с различной академической подготовленностью. В отечественной тестологии употребляется термин дискриминативности или дифференцирующей способности заданий.

Дискриминативность заданий определяется, как способность различать испытуемых с высоким общим баллом по тесту, от тех, кто получил более низкий балл. Индекс дискриминации задания вычисляется как разность долей испытуемых из высокопродуктивной и низкопродуктивной группы, правильно решивших ее.

Как правило, берут от 10 % до 30 % (чаще 27 %) лучших и худших результатов выполнения всего теста.

Индекс дискриминации может изменяться в пределах от плюс 1 (когда с заданием справились все учащиеся лучшей группы и ни один из учеников из худшей группы) до минус 1 (когда складывается обратная ситуация - в лучшей группе никто не справился, а в худшей справились все).

Задания с отрицательным значением индекса дискриминации или со значением, близким к нулю, нельзя признать удовлетворительными, в них допущены существенные ошибки.

Показатель индекса дискриминации более 0,3 следует признавать удовлетворительным. Существуют и другие способы определения дискриминативности заданий. Все они основаны на нахождении различных коэффициентов корреляции.