Глава iii. тестовый экзамен, методика проведения и его анализ

Тестовый экзамен с применением вопросов множественного выбора имеет явные преимущества по сравнению с устным. Во-первых, он проводится для всего потока в один день, во-вторых, психологические нагрузки отвечающих значительно меньше, чем при устном ответе, в-третьих, тестовый экзамен позволяет провести анализ с применением математических выкладок, что объективно характеризует ориентацию студентов в изучаемом предмете.

Для проведения экзамена необходимо изготовить несколько вариантов экзаменационных работ. Более чем 20-летний опыт проведения тестового экзамена показал, что для этого необходимо составить не менее 5 вариантов, каждый из которых состоит из 100 вопросов. Меньшее количество вариантов может способствовать списыванию отвечающими друг у друга, большее же их число затруднит проведение анализа экзаменационной сессии. Для подготовки и ответа выделяется 3 часа, после чего варианты собираются для проверки. Каждый из вариантов должен содержать одинаковое количество вопросов по различным темам. Структура вариантов может быть составлена следующим образом: 1—10-й вопросы выделены для общей тематики: волемические изменения при различной патологии, КЩС, определение группы крови, осложнения при переливании крови и пр.; 11—22-й вопросы относятся к патологии заболеваний легких; 23—27-й — заболевания щитовидной железы; 28—30-й — заболевания молочной железы; 31—42-й—заболевания пищевода и желудка; 43—

52-й—патология желчного пузыря и поджелудочной железы;

53—57-й—патология червеобразного отростка; 58—67-й—вопросы острой кишечной непроходимости и перитонита; 68—77-й— патология ободочной и прямой кишок; 78—87-й—патология сосудов; 88—92-й—грыжи и 93—100-й—прочие заболевания. Естественно, структура вариантов может быть иной в зависимости от научной направленности кафедры. Каждые 3—4 года приходится создавать новые варианты, так как старые часто становятся достоянием студенческой аудитории, что приводит к потере объективности тестов. Наличие банка вопросов по различным заболеваниям значительно упростит эту довольно трудоемкую процедуру.

Матрицей для математического анализа является общий лист с цифровым перечислением всех 100 вопросов и пунктов а, б, в, г, д, один из которых, являющийся, по мнению экзаменующегося, правильным, зачеркивается (схема 1). На контрольный лист накладывается прозрачный трафарет, изготовленный, например, из отмытой рентгенологической пленки, на котором в виде кружочка или крестика наносится правильный ответ. Эти трафареты хранятся в сейфе у наиболее ответственного лица кафедры и раздаются преподавателям непосредственно перед проверкой работ. В связи с тем, что окончательный ответ однозначен, количество ошибок может быть от 1 до 100.

Цели математического анализа экзаменационной сессии показаны на схеме 2. Одним из самых важных и наглядных показателей является установление компетентности студентов в вопросах хирургии (схема 2).

Математический анализ начинается с подсчета в каждой работе количества ошибок. Это один из самых трудоемких моментов технической обработки материала. Сводное количество ошибок, деленное на число отвечающих, дает среднюю ошибку. Этот показатель позволяет ориентировочно судить о результате экзаменационной сессии, сравнить его с соответствующими результатами в предыдущие годы. Подобное же вычисление в каждом варианте характеризует степень их трудности для студента. Средняя ошибка каждого варианта, так же как и средняя ошибка курса, выраженные графически в сопоставлении с данными по нескольким сессиям, наглядно отражают степень подготовленности потока и трудность вариантов для отвечающих в настоящем году. Анализ экзаменационных работ в зависимости от количества ошибок является стабильным и достаточно информативным. Традиционно выделены следующие работы: от 1 до 15 ошибок, от 16 до 25, от 26 до 30, от 31 до 40 и от 41 ошибки и больше. Процентное соотношение этих работ детально характеризует ориентацию студентов в изучаемом предмете, позволяет выделить число неуспевающих и отличников. Подобное же вычисление проводится в каждом варианте, что дополнительно характеризует эти варианты по степени трудности.

Конечным этапом анализа экзаменационной сессии по выявлению знаний студентов является определение коэффициента неосведомленности студентов, вычисляемого по формуле:

Общее количество ошибок по теме (варианту)

КН=---------------------------------------------------------

Количество вопросов в теме (варианте)* число отвечающих

Не претендуя на математическую обоснованность, коэффициент неосведомленности позволяет не только выявить общую ориентированность студентов в хирургии и трудность каждого варианта для отвечающих, но и, что более важно, определить осведомленность студентов по каждой теме в отдельности. Например, по заболеваниям периферических сосудов в варианте А допущено 129 ошибок 36 отвечающим.

В этом варианте данной патологии уделено 10 вопросов. Следовательно:

КН=-------=0,36

10*36

Сопоставляя величины К.Н по каждой теме, можно выделить наиболее и наименее информативные из них и сделать соответствующие выводы. Более полная характеристика знаний студента может быть получена при сравнении результатов экзаменационной сессии с успеваемостью в течение года, так как различные причины (болезнь учащегося, прогулы, непосещение лекций) найдут отражение в экзаменационных ответах на эту тему.

Важным аспектом анализа экзаменационных вариантов является выявление качества составленных вопросов — валидность экзаменационных тестов (схема 3).

СХЕМА 1

2-й МОЛГМИ. Кафедра хирургических болезней № 3 лечебного факультета

КОНТРОЛЬНЫЙ ЛИСТ

Группа ___________Ф.И.О. _________________

Вариант _______Преподаватель_________________

Заполняется на кафедре (для компьютерной обработки) Код группы ___Номер студента___Номер варианта . Количество ошибок Резерв-1 _____Резерв-2 ____

1абвгд 26абвгд 51 а б в г д 76 а б в г д

2абвгд 27абвгд 52абвгд 77абвгд

Забвгд 28абвгд 53 а б в г д 78абвгд

4абвгд 29 а б в г д 54абвгд 79абвгд

5 а б в г д 30абвгд 55абвгд 80абвгд