- •Лекция 1 понятие о качестве образования. Педагогическая технология. Традиционные и новые средства оценивания результатов обучения
- •Основные характеристики традиционной и современной педагогической технологий
- •Лекция 2 Мониторинг, рейтинг, портфолио
- •2. Рейтинговая система оценивания
- •3. Портфолио обучающихся
- •Лекция 3 история развития системы тестирования за рубежом и в россии
- •Артур Синтон Отис
- •Тестология в России.
- •Виды адаптивного тестирования
- •Лекция 4 педагогические тесты. Термины и определения. Классификация педагогических тестов
- •Причины появления адаптивного тестирования
- •Отличия теста от других форм контроля
- •Структура теста
- •Кассификация педагогических тестов
- •Сравнительный анализ нормативно-ориентированного и и критериально-ориентированного тестов
- •Лекция 5 типы, формы и виды тестовых заданий
- •Структура тестового задания:
- •Практическое занятие 1
- •Тема 1. Формы тестовых заданий
- •Различают два способа оценивания
- •Структура тестового задания
- •Тестовые задания закрытого типа
- •1. Тестовые задания альтернативных ответов
- •2. Тестовые задания множественного выбора
- •Задания с выбором нескольких правильных вариантов ответа
- •3. Тестовые задания на установление соответствия
- •4. Тестовые задания на установление последовательности
- •Тестовые задания открытого типа
- •Тестовые задания с кратким ответом
- •Лекция 6 основные этапы разработки педагогического теста
- •1. Определение целей тестирования
- •Классификация целей обучения
- •Конкретизированные цели обучения
- •2. Планирование содержания теста Анализ содержания учебной дисциплины и отбор содержания для теста
- •3. Определение структуры теста. Разработка спецификации теста
- •4. Составление тестовых заданий
- •5. Экспертный анализ содержания и формы тестовых заданий
- •Лекция 7 проведение пробного тестирования. Показатели качества тестов
- •Сбор и статистическая обработка результатов тестирования
- •Характеристика тестовых заданий
- •Трудность тестовых заданий
- •Дискриминативность тестового задания
- •Анализ качества дистракторов в заданиях закрытой формы
- •Анализ правдоподобности дистракторов в заданиях закрытой формы с четырьмя ответами
- •Показатели качества теста
- •Надежность
- •Оценка надежности теста
- •Двукратное тестирование:
- •Однократное тестирование:
- •Валидность
- •Практическое занятие 2
- •Тема 2. Работа с матрицей результатов тестирования
- •1. Составление матрицы. Понятие верных и неверных профилей ответов.
- •2 . График (рис. 5)
- •3. Меры центральной тенденции
- •4. Меры изменчивости.
- •5. Меры симметрии и островершинности кривых распределений
- •Лекция 8 современная теория конструирования тестов
- •Математические модели современной теории тестов
- •Лекция 9 стандартизация теста и интерпретация результатов тестирования. Егэ и качество образования
- •Стандартизация теста
- •Егэ и качество образования
- •Задачи единого экзамена
- •Преимущества егэ перед другими формами контроля
- •Объективность.
- •Надежность.
- •3. Достоверность.
- •Структура киМов егэ
- •Рекомендуемая литература
4. Составление тестовых заданий
Составление тестовых заданий – один из важнейших этапов в процессе создания теста. Один из ведущих принципов составления заданий - принцип конгруэнтности, т.е. соответствия содержания заданий проверяемой области содержания. Разработчики должны четко представлять, какой конкретный элемент содержания или умение проверяет каждое задание. С помощью задания проверяется что-то одно. Неправильно считать, что лучше составлять задания на проверку нескольких знаний. Неопределенность предмета измерения может привести к двусмысленности формулировки, что ухудшает качество самого теста и влияет на результаты измерения.
В зависимости от целей тестирования и содержания проверяемой дисциплины выбираются оптимальные формы тестовых заданий. Разработчик может использовать в тесте задания только одной формы, например, закрытые задания, а также сочетать в тесте несколько различных форм (например, КИМы ЕГЭ, ЦТ). Выбор форм во многом зависит от технологии проверки, сбора и обработки результатов, материального обеспечения.
Для предварительного тестирования готовят заданий в 2, а то и в 3 раза больше, чем потом войдет в конечный вариант теста.
5. Экспертный анализ содержания и формы тестовых заданий
После того как разработчики представили множество тестовых заданий проходит процедура экспертного анализа содержания и формы экспертных заданий. Для экспертизы привлекаются независимые специалисты, компетентные в данной области, которые не имели отношения к разработке теста. Число специалистов варьируется в зависимости от целей и масштабности тестирования. Для анализа тестов локального использования (одна школа, институт) достаточно 2-3 эксперта; для тестов, рассчитанных на массовое тестирование, привлекаются 3-5 экспертов, чтобы повысить эффективность процедуры экспертизы.
В конце всей работы эксперт представляет заключение о качестве теста (тестовых заданий), в котором даются рекомендации по корректировке и улучшению содержания теста. По результатам экспертной оценки разработчиками проводится корректировка тестовых заданий и доработка теста в целом.
Лекция 7 проведение пробного тестирования. Показатели качества тестов
Пробное тестирование преследует несколько целей:
выявление заданий, в которых есть недостатки (несоответствие трудности заданий уровню подготовленности испытуемых; непонятные или двусмысленные формулировки заданий, выявление неработающих дистракторов в заданиях закрытой формы и др.);
определение статистических характеристик тестовых заданий и теста в целом.
Для пробного тестирования готовятся инструкция для учащихся, как выполнять тест, инструкция для проводящих тестирование (наблюдателей), инструкция по апробации (какие эмпирические данные необходимо собрать). Апробация проводится на репрезентативной выборке испытуемых с четким соблюдением правил проведения тестирования (в современной теории тестирования не менее 1000 чел.).
Сбор и статистическая обработка результатов тестирования
Для удобства обработки тестовых данных результаты заносятся в специальную таблицу – матрицу тестовых результатов. Работа с матрицей результатов тестирования представлена в практическом занятии 2 (с. 33).
