- •Лекция 1 понятие о качестве образования. Педагогическая технология. Традиционные и новые средства оценивания результатов обучения
- •Основные характеристики традиционной и современной педагогической технологий
- •Лекция 2 Мониторинг, рейтинг, портфолио
- •2. Рейтинговая система оценивания
- •3. Портфолио обучающихся
- •Лекция 3 история развития системы тестирования за рубежом и в россии
- •Артур Синтон Отис
- •Тестология в России.
- •Виды адаптивного тестирования
- •Лекция 4 педагогические тесты. Термины и определения. Классификация педагогических тестов
- •Причины появления адаптивного тестирования
- •Отличия теста от других форм контроля
- •Структура теста
- •Кассификация педагогических тестов
- •Сравнительный анализ нормативно-ориентированного и и критериально-ориентированного тестов
- •Лекция 5 типы, формы и виды тестовых заданий
- •Структура тестового задания:
- •Практическое занятие 1
- •Тема 1. Формы тестовых заданий
- •Различают два способа оценивания
- •Структура тестового задания
- •Тестовые задания закрытого типа
- •1. Тестовые задания альтернативных ответов
- •2. Тестовые задания множественного выбора
- •Задания с выбором нескольких правильных вариантов ответа
- •3. Тестовые задания на установление соответствия
- •4. Тестовые задания на установление последовательности
- •Тестовые задания открытого типа
- •Тестовые задания с кратким ответом
- •Лекция 6 основные этапы разработки педагогического теста
- •1. Определение целей тестирования
- •Классификация целей обучения
- •Конкретизированные цели обучения
- •2. Планирование содержания теста Анализ содержания учебной дисциплины и отбор содержания для теста
- •3. Определение структуры теста. Разработка спецификации теста
- •4. Составление тестовых заданий
- •5. Экспертный анализ содержания и формы тестовых заданий
- •Лекция 7 проведение пробного тестирования. Показатели качества тестов
- •Сбор и статистическая обработка результатов тестирования
- •Характеристика тестовых заданий
- •Трудность тестовых заданий
- •Дискриминативность тестового задания
- •Анализ качества дистракторов в заданиях закрытой формы
- •Анализ правдоподобности дистракторов в заданиях закрытой формы с четырьмя ответами
- •Показатели качества теста
- •Надежность
- •Оценка надежности теста
- •Двукратное тестирование:
- •Однократное тестирование:
- •Валидность
- •Практическое занятие 2
- •Тема 2. Работа с матрицей результатов тестирования
- •1. Составление матрицы. Понятие верных и неверных профилей ответов.
- •2 . График (рис. 5)
- •3. Меры центральной тенденции
- •4. Меры изменчивости.
- •5. Меры симметрии и островершинности кривых распределений
- •Лекция 8 современная теория конструирования тестов
- •Математические модели современной теории тестов
- •Лекция 9 стандартизация теста и интерпретация результатов тестирования. Егэ и качество образования
- •Стандартизация теста
- •Егэ и качество образования
- •Задачи единого экзамена
- •Преимущества егэ перед другими формами контроля
- •Объективность.
- •Надежность.
- •3. Достоверность.
- •Структура киМов егэ
- •Рекомендуемая литература
Анализ качества дистракторов в заданиях закрытой формы
Одно из важнейших требований, которое предъявляется к заданиям закрытой формы – это правдоподобность дистракторов – равноценная вероятность выбора дистрактора при неправильном ответе. Оценка качества дистрактора называется дистракторным анализом.
Дистракторный анализ предполагает подсчет долей испытуемых, выбравших каждый дистрактор. В идеальном варианте каждый дистрактор должен выбираться в равной доле от всех неправильных ответов. В таблице 7 показано идеальное распределение долей.
Таблица 7
№ задания |
1 ответ |
2 ответ* |
3 ответ |
4 ответ |
j |
0,1 |
0,7 |
0,1 |
0,1 |
В таблице 8 показано, что правильно выполнили задание (выбрали 2-й ответ) 70 % испытуемых. Остальные 30 %, которые дали неправильные ответы, равномерно выбрали 1, 3, 4 ответы, т.е. в задании были даны равновероятные дистракторы.
Таблица 8
Анализ правдоподобности дистракторов в заданиях закрытой формы с четырьмя ответами
№ задания |
Всего |
Распределение ответов испытуемых |
|||||||
1-й ответ |
2-й ответ |
3-й ответ |
4-й ответ |
||||||
кол. |
% |
Кол. |
% |
кол. |
% |
кол. |
% |
||
1 |
96 |
8 |
8,3 |
1 |
1,0 |
65 |
67,7* |
22 |
22,9 |
2 |
96 |
4 |
4,2 |
20 |
20,8 |
2 |
2,1 |
70 |
72,9* |
3 |
97 |
19 |
19,6 |
29 |
29,9 |
24 |
24,7* |
25 |
25,8 |
4 |
93 |
18 |
19,4 |
10 |
10,8 |
59 |
63,4* |
6 |
6,5 |
5 |
96 |
47 |
49,0 |
33 |
34,4* |
9 |
9,4 |
7 |
7,3 |
6 |
97 |
0 |
0,0 |
6 |
6,2 |
91 |
93,8* |
0 |
0,0 |
7 |
90 |
19 |
21,1 |
24 |
26,7 |
40 |
44,4* |
7 |
7,8 |
8 |
93 |
3 |
3,2 |
11 |
11,8 |
2 |
2,2 |
77 |
82,8* |
9 |
86 |
31 |
36,0 |
1 |
1,2 |
22 |
25,6 |
32 |
37,2* |
10 |
97 |
35 |
36,1 |
23 |
23,7 |
39 |
40,2* |
0 |
0,0 |
Звездочками помечены верные ответы.
В результате дистракторного анализа выявляются задания с неработающими дистракторами (вариантами ответов в закрытом задании, которые испытуемые выбирают мало или вообще не выбирают). Если в задании есть неработающие дистракторы, то вероятность угадывания правильного ответа повышается, а следовательно снижается его трудность. Такие задания требуют переработки (замены неработающих дистракторов) или удаления их из теста. Задание №6 можно переделать в открытую форму.
