Матрица результатов тестирования.
Темы для самостоятельного изучения:
Составление матрицы, приведение к треугольному виду, анализ неверных профилей, подсчет мер центральной тенденции, мер изменчивости, мер симметрии и островершинности кривой распределения.
Дистракторный анализ
Дифференцирующая способность тестового задания (метод крайних групп)
Задания выполняются в программе Microsoft Excel. Слушателям можно раздать распечатки хода выполнения работы (см. файл в приложениях Лабораторная работа01.doc)
1. Составление матрицы, приведение к треугольному виду, анализ неверных профилей, подсчет мер центральной тенденции, мер изменчивости, мер симметрии и островершинности кривой распределения.
Раздаточный материал: Отработанные бланки ответов, на тест. (Перед занятием необходимо было протестировать испытуемых по своему тесту).
Обозначения:
xi – индивидуальный балл i – ого ученика,
- среднее значение баллов по тестируемой группе,
- стандартное отклонение,
N – число учеников,
n – число заданий в тесте.
Ход работы:
1) Заполнить матрицу результатов тестирования. (Использовать образец из файла Приложение1.xls).
2) Удалить все строки и столбцы, состоящие только из 1 или только из 0.
3) Подсчитать индивидуальные баллы испытуемых и количество правильных ответов испытуемых на каждое задание теста.
4) Привести матрицу к треугольному виду: для этого производят перестановку столбцов, располагая задания по убыванию числа правильных ответов на них. Затем сортируют строки по возрастанию индивидуальных баллов испытуемых.
Посчитать количество ошибок в каждом профиле ответов. (Преподаватель демонстрирует параллельно выполнение задания, используя файл с матрицей результатов тестирования, представленной в файле Приложение2.xls)
Найти для своих данных моду, среднее выборочное.
Добавить столбец, в котором вычисляется разность между индивидуальным баллом и средним выборочным.
8) Посчитать дисперсию 
9) Посчитать стандартное отклонение 
, используя выражение 
сделать вывод о нормальности распределения.
10) Подсчитать:
Сделать выводы.
11) На отдельном листе создать таблицу:
| xi | Кол. испытуемых с индивидуальным баллом xi | Процент испытуемых с индивидуальным баллом xi |
| ,,, | ||
| ,,, | ||
| ,,, | ||
| n |
Построить гистограмму распределения индивидуальных баллов по последнему столбику (подписи к оси ОХ берем из 1 столбца).
Провести анализ полученной гистограммы.
Дистракторный анализ
Выполнить дистракторный анализ для своих данных по заданиям закрытой формы.
(В качестве примера см. файл Приложение3.xls)
Оценка правдоподобности дистракторов основана на подсчете долей испытуемых, выбравших каждый из неправильных ответов. Количество испытуемых, выбравших неверный ответ должно равномерно распределяться между дистракторами. Конечно на практике такая идеализированная ситуация редко встречается. Дистракторы, оказавшиеся неправдоподобными по результатам эмпирической проверки необходимо заменить.
Заполнить таблицу по своим данным и сделать выводы о качестве дистракторов. Первый столбец содержит номера заданий. Второй – указывает количество испытуемых, выполнявших данное задание. Если испытуемый не приступал к выполнению задания, то он не учитывается (например в заданиях №5 и №10). Все последующие столбцы содержат число и процент испытуемых, выбравших каждый из ответов к заданиям теста. Звездочкой отмечен верный ответ на задание.
| Анализ правдоподобности дистракторов | |||||||||
| № | всего | Распределение ответов испытуемых | |||||||
| 1-ый ответ | 2-ый ответ | 3-ый ответ | 4-ый ответ | ||||||
| тест | % | тест | % | тест | % | тест | % | ||
| 48* | 96% | 2% | 2% | 0% | |||||
| 8% | 6% | 4% | 41* | 82% | |||||
| 25* | 50% | 12% | 30% | 8% | |||||
| 14% | 0% | 20% | 33* | 66% | |||||
| 30* | 61% | 6% | 14% | 18% | |||||
| 40% | 10% | 17* | 34% | 16% | |||||
| 10% | 18% | 4% | 34* | 68% | |||||
| 31* | 62% | 12% | 12% | 14% | |||||
| 43* | 86% | 6% | 4% | 4% | |||||
| 19% | 32* | 67% | 4% | 10% |