- •Лекция 1 понятие о качестве образования. Педагогическая технология. Традиционные и новые средства оценивания результатов обучения
- •Основные характеристики традиционной и современной педагогической технологий
- •Лекция 2 Мониторинг, рейтинг, портфолио
- •2. Рейтинговая система оценивания
- •3. Портфолио обучающихся
- •Лекция 3 история развития системы тестирования за рубежом и в россии
- •Артур Синтон Отис
- •Тестология в России.
- •Виды адаптивного тестирования
- •Лекция 4 педагогические тесты. Термины и определения. Классификация педагогических тестов
- •Причины появления адаптивного тестирования
- •Отличия теста от других форм контроля
- •Структура теста
- •Кассификация педагогических тестов
- •Сравнительный анализ нормативно-ориентированного и и критериально-ориентированного тестов
- •Лекция 5 типы, формы и виды тестовых заданий
- •Структура тестового задания:
- •Практическое занятие 1
- •Тема 1. Формы тестовых заданий
- •Различают два способа оценивания
- •Структура тестового задания
- •Тестовые задания закрытого типа
- •1. Тестовые задания альтернативных ответов
- •2. Тестовые задания множественного выбора
- •Задания с выбором нескольких правильных вариантов ответа
- •3. Тестовые задания на установление соответствия
- •4. Тестовые задания на установление последовательности
- •Тестовые задания открытого типа
- •Тестовые задания с кратким ответом
- •Лекция 6 основные этапы разработки педагогического теста
- •1. Определение целей тестирования
- •Классификация целей обучения
- •Конкретизированные цели обучения
- •2. Планирование содержания теста Анализ содержания учебной дисциплины и отбор содержания для теста
- •3. Определение структуры теста. Разработка спецификации теста
- •4. Составление тестовых заданий
- •5. Экспертный анализ содержания и формы тестовых заданий
- •Лекция 7 проведение пробного тестирования. Показатели качества тестов
- •Сбор и статистическая обработка результатов тестирования
- •Характеристика тестовых заданий
- •Трудность тестовых заданий
- •Дискриминативность тестового задания
- •Анализ качества дистракторов в заданиях закрытой формы
- •Анализ правдоподобности дистракторов в заданиях закрытой формы с четырьмя ответами
- •Показатели качества теста
- •Надежность
- •Оценка надежности теста
- •Двукратное тестирование:
- •Однократное тестирование:
- •Валидность
- •Практическое занятие 2
- •Тема 2. Работа с матрицей результатов тестирования
- •1. Составление матрицы. Понятие верных и неверных профилей ответов.
- •2 . График (рис. 5)
- •3. Меры центральной тенденции
- •4. Меры изменчивости.
- •5. Меры симметрии и островершинности кривых распределений
- •Лекция 8 современная теория конструирования тестов
- •Математические модели современной теории тестов
- •Лекция 9 стандартизация теста и интерпретация результатов тестирования. Егэ и качество образования
- •Стандартизация теста
- •Егэ и качество образования
- •Задачи единого экзамена
- •Преимущества егэ перед другими формами контроля
- •Объективность.
- •Надежность.
- •3. Достоверность.
- •Структура киМов егэ
- •Рекомендуемая литература
Показатели качества теста
Основными показателями качества теста являются надежность и валидность теста. А так как тест является инструментом педагогического измерения, то эти показатели имеют численное значение и определяются с помощью различных методов, как в классической теории тестов, так и в современной теории тестов.
Надежность
Надежность – это характеристика теста, отражающая точность педагогического измерения, а также устойчивость результатов тестирования к воздействию посторонних (случайных) факторов.
Оценка надежности теста
Для оценки надежности нормативно-ориентированного теста: хорошим коэффициент надежности теста считается, когда показатель колеблется в пределах
0,8 < К < 1.
Нижним пределом принято считать показатель 0,7. Если значение коэффициента надежности ниже, то надежность теста считается неудовлетворительной.
Для оценки надежности нормативно-ориентированного теста используются две группы методов.
Двукратное тестирование:
ретестовый метод;
метод параллельных форм.
Однократное тестирование:
2.1. метод расщепления теста;
2.2. метод Кьюдера-Ричардсона.
Оценка надежности чаще всего строится на подсчете корреляции между двумя наборами результатов выполнения одного и того же теста или двух его параллельных форм. Чем выше корреляция, тем надежнее тест.
Оценка надежности критериально- ориентированного теста.
Если создается тест для аттестации по итогам определенной ступени обучения, то рекомендуется вычислять фи- и каппа-коэффициенты. Их величины должны быть больше 0,8 (0,85) и приблизительно равны между собой, что свидетельствует о хорошей надежности теста.
Валидность
Валидность еще одна важная характеристика теста, определяющая его качество. Валидность (от англ. Validity - значимость, обоснованность, пригодность) – «это характеристика способности теста служить поставленной цели измерения», т.е. способность теста измерять то, для чего он предназначен.
Выделяют несколько видов валидности, которые отражают различные аспекты этого критерия качества теста (Анастази А.; Майоров А.Н.).
1) Содержательная валидность (content validity).
Валидность по содержанию закладывается в тест уже на этапе работы со спецификацией теста и отбора его содержания. Для педагогических тестов содержательная валидность очень важна и оценивается она экспертным путем. Независимые эксперты определяют, насколько тест охватывает область содержания проверяемого предмета.
Критериальная валидность.
Критериальная валидность - это характеристика теста, отражающая обоснованность, значимость его результатов по сравнению с некоторой внешней переменной (степень соответствия между результатами тестирования и внешним критерием). Для оценки критериальной валидности необходимо составить таблицу с результатами тестирования и список тех же студентов с экспертной оценкой преподавателя (-ей). В качестве критерия берем оценки преподавателей при традиционной проверке знаний без использования тестов. Критериальная валидность измеряется от –1 до 1, валидность более 0,3 считается удовлетворительной.
3) Конструктная (концептуальная) валидность.
Об этом виде валидности говорится в том случае, если представление об измеряемом феномене существует только в проекте и требует доказательства.
