Тема 9. Основы педагогического контроля в высшей школе
1. Функции педагогического контроля
2. Формы педагогического контроля
3. Оценка и отметка
4. Педагогический тест
5. Пути повышения объективности контроля
6. Тестирование. Методы оценки критериев качества тестов
Известно, что контроль стимулирует обучение и влияет на поведение студентов. Как показала практика, попытки исключить контроль частично или полностью из учебного процесса приводят к снижению качества обучения. Внедряемые в настоящее время интенсивные методы обучения ведут неизбежно к новым поискам в области повышения качества и эффективности педагогического контроля и появлению его новых форм, например, таких как рейтинг. Поскольку рейтинговая форма контроля проводится в рамках модульного обучения, сведения о ней можно найти в соответствующем разделе
Функции педагогического контроля
В области контроля можно выделить три основные взаимосвязанные функции: диагностическую, обучающую и воспитательную.
Диагностическая функция: контроль - это процесс выявления уровня знаний, умений, навыков, оценка реального поведения студентов.
Обучающая функция контроля проявляется в активизации работы по усвоению учебного материала.
Воспитательная функция: наличие системы контроля дисциплинирует, организует и направляет деятельность студентов, помогает выявить пробелы в знаниях, особенности личности, устранить эти пробелы, формирует творческое отношение к предмету и стремление развить свои способности.
В учебно-воспитательном процессе все три функции тесно взаимосвязаны и переплетены, но есть и формы контроля, когда одна, ведущая функция превалирует над остальными. Так, на семинаре в основном проявляется обучающая функция: высказываются различные суждения, задаются наводящие вопросы, обсуждаются ошибки, но вместе с тем семинар выполняет диагностическую и воспитывающую функции.
Зачеты, экзамены, коллоквиумы, тестирование выполняют преимущественно диагностическую функцию контроля.
При применении программированного контроля проявляется его обучающая и контролирующая функции.
Формы педагогического контроля
Систему контроля образуют экзамены, зачеты, устный опрос (собеседование), письменные контрольные, рефераты, коллоквиумы, семинары, курсовые, лабораторные контрольные работы, проектные работы, дневниковые записи, журналы наблюдений. Каждая из форм имеет свои особенности.
Во время устного опроса контролируются не только знания, но тренируется устная речь, развивается педагогическое общение. Письменные работы позволяют документально установить уровень знания материала, но требуют от преподавателя больших затрат времени. Экзамены создают дополнительную нагрузку на психику студента. Курсовые и дипломные работы способствуют формированию творческой личности будущего специалиста. Умелое сочетание разных видов контроля - показатель уровня постановки учебного процесса в вузе и один из важных показателей педагогической квалификации преподавателя.
По времени педагогический контроль делится на текущий, тематический, рубежный, итоговый, заключительный.
Текущий контроль помогает дифференцировать студентов на успевающих и неуспевающих, мотивирует обучение (опрос, контрольные, задания, проверка данных самоконтроля).
Тематический контроль - это оценка результатов определенной темы или раздела программы.
Рубежный контроль - проверка учебных достижений каждого студента перед тем, как преподаватель переходит к следующей части учебного материала, усвоение которого невозможно без усвоения предыдущей части.
Итоговый контроль - экзамен по курсу. Это итог изучения пройденной дисциплины, на котором выявляется способность студента к дальнейшей учебе. Итоговым контролем может быть и оценка результатов научно-исследовательской практики.
Заключительный контроль - госэкзамены, защита дипломной работы или дипломного проекта, присвоение квалификации Государственной экзаменационной комиссией.
Оценка и отметка
Оценка и отметка являются результатами проведенного педагогического контроля. Оценка - способ и результат, подтверждающий соответствие или несоответствие знаний, умений и навыков студента целям и задачам обучения. Она предполагает выявление причин неуспеваемости, способствует организации учебной деятельности. Преподаватель выясняет причину ошибок в ответе, подсказывает студенту, на что он должен обратить внимание при пересдаче, доучивании.
Отметка - численный аналог оценки. Абсолютизация отметки ведет к формализму и безответственности по отношению к результатам обучения.
При оценке знаний следует исходить из следующих рекомендаций: "отлично" ставится за точное и прочное знание материала в заданном объеме. В письменной работе не должно быть ошибок. При устном опросе речь студента должна быть логически обоснована и грамматически правильна.
"Хорошо" ставится за прочное знание предмета при малозначительных неточностях, пропусках, ошибках (не более одной-двух).
"Удовлетворительно" - за знание предмета с заметными пробелами, неточностями, но такими, которые не служат препятствием для дальнейшего обучения.
"Неудовлетворительно" - за незнание предмета, большое количество ошибок в устном ответе либо в письменной работе.
Преимущество шкалы - простота, отсюда ее широкая распространенность. Недостатки шкалы: 1) личное понимание успешности знаний студента преподавателем. Срабатывает субъективизм преподавателя, его реакция на текущую успеваемость, посещение, поведение студента, внешний вид, манеру держаться, стиль одежды и речи. Но ведь можно не ходить и выучить, не писать конспекты и отлично ответить, быть циничным нахалом и знать; 2) слабая дифференцирующая способность. Она (пятибалльная система, а вернее, четыре оценочные категории) позволяет только грубую классификацию на четыре группы. А как важна более точная оценочная шкала при приеме в вуз?!
Проблема оценки знаний очень актуальна. Многие преподаватели к пятибалльной оценке прибавляют " + " или "-", получается как бы 10-балльная система. В качестве примера можно прибегнуть к следующей десятибалльной шкале:
1 - нет знания предмета,
2 - очень плохие знания,
3 - плохие знания,
4 - неудовлетворительные знания,
5 - малоудовлетворительные знания,
6 - удовлетворительные знания,
7 - недостаточно хорошие знания,
8 - хорошие знания,
9 - очень хорошие знания,
10 - отличные знания.
Такая система облегчила бы конкурсный отбор абитуриентов, а у студентов при ее применении повышается мотивация, появляется больше возможностей проявить себя как личность
Педагогический тест
Наиболее распространенное средство педагогического измерения - педагогический тест. Педагогический тест - это совокупность заданий, отобранных на основе научных приемов для педагогического измерения в тех или иных целях.
Существует ряд требований к тесту организационного характера:
• тестирование осуществляется главным образом через программированный контроль. Никому не дается преимуществ, все отвечают на одни и те же вопросы в одних и тех же условиях;
• оценка результатов производится по заранее разработанной шкале;
• применяются необходимые меры, предотвращающие искажение результатов (списывание, подсказку) и утечку информации о содержании тестов.
При проведении тестирования учитываются три критерия качества теста: надежность, валидность, объективность.
Надежность - определение степени погрешностей в педагогической оценке, в вычислении истинного значения оценки. В последнее время получил распространение экспертный опрос, когда студента оценивают 2-3 и более преподавателей, и посредством коррелирования результатов появляется возможность надежности оценки.
Валидность теста - соответствие форм и методов контроля его цели.
Задача качественной оценки знаний прежде всего зависит от ответа на вопрос: что такое знания? Моделирование образа идеального студента, знающего предмет, помогает подобрать соответствующий материал для контроля. Наиболее распространенные причины невалидности контроля - списывание, подсказка, репетиторское "натаскивание", снисходительность, чрезмерная требовательность, применение какого-либо метода при отсутствии надлежащих условий. В таких случаях результаты контроля неадекватны поставленным задачам. В целях повышения валидности педагогического контроля применяются экспертные оценки контрольного материала для приведения в соответствие требований учебной программы и концепции знания. Концепция знания может зависеть от статуса вуза, контингента обучаемых. Соответственно должен варьироваться и контрольный материал.
Объективность - критерий, в котором сочетаются надежность, валидность плюс ряд аспектов психологического, педагогического, этического, ценностного характера.
Пути повышения объективности контроля
Первое направление - формирование коллегиальной оценки комиссией, например ГЭК. Но ее оценка складывается из нескольких субъективных, это скорее так называемая интерсубъективная оценка, поскольку при неравноценном составе ГЭК мнение одного маститого специалиста может перевесить мнение других членов.
Второе направление - использование стандартных тестовых программ технического контроля. Он может проводиться кафедрой, вузом, методической лабораторией, специализированными организациями по проверке качества вузовского образования.
Увеличению объективности способствует экспертный опрос, при котором мнения специалистов оцениваются количественными методами. Преподавателю высшей школы следует учитывать все аспекты критерия объективности в контроле:
Эстетический аспект объективности - моральное регулирование. Списывают и подсказывают только там, где это не расценивается как нарушение учебной этики. Преподавателю нельзя иметь любимчиков и нелюбимых студентов и соответственно этому оценивать знания. Погоня за формальными показателями ведет к увеличению незаслуженных хороших оценок. Стремление приукрасить несовершенные показатели, так называемая реификация (овеществление показателя), оборачивается снижением требований к качеству обучения.
Ценностный аспект критерия объективности затрагивает вопрос о справедливости оценки. В сознании студентов необъективная оценка ассоциируется с несправедливой. Мнение преподавателя воспринимается как справедливое, если оно подкреплено рациональными доводами. Студентов нужно убедить в справедливости решения преподавателя. В их представлении преподаватели делятся на строгих и добрых, поскольку каждый преподаватель руководствуется своими собственными критериями оценки и объективность зависит от его педагогического опыта и личностных качеств.
Психологический аспект объективности. Решение преподавателя о том, что считать критерием той или иной оценки, определяется еще и психологическими факторами. Отношение студентов к преподавателю, его курсу, посещаемость, характер и качество задаваемых вопросов формируют "образ" студента в сознании преподавателя.
Субъективность преподавателя в оценке знания накладывается на субъективность восприятия этой оценки студентом. Поэтому для достижения объективности важно психологическое обоснование оценки знаний. Преподаватель во многих случаях должен объяснить, почему выставляется та или иная отметка. В случаях убедительной аргументации отметка воспринимается студентом как объективная оценка его знаний.
Тестирование
Тест - это совокупность заданий, опробованных на основе научных критериев для педагогического измерения в тех или иных целях.
Цели тестового контроля могут быть следующими:
• обобщающая - повышение качества обучения;
• локальные (конкретные) цели:
1. Объективная оценка объема знаний студентов.
2. Профориентация и профотбор. Тесты устанавливают адекватность выбора профессии абитуриентами.
3. Итоговая аттестация и аккредитация вузов. В настоящее время в России созданы с этой целью группы разработчиков - 5-6 вузов, работающих по разным специальностям.
4. Выявление структуры знаний у студентов (схема 5.3). Особенное внимание уделяется структуре, а не объему знаний в Японии.
5. Система полного усвоения знаний. Эта система особенно популярна в западных странах. Выявляются нули в тестах и соответственно заполняются пробелы в знаниях.
6. Оценка эффективности работы кафедры, преподавания читаемых на ней предметов.
Тест - система заданий возрастающей трудности специфической формы, позволяющая объективно оценивать уровень и структуру знаний студентов.
Единицами тестирования служат тестовые задания - это одна единица контрольного материала, сформулированная в виде утверждения, предложения с неизвестным, удовлетворяющая ряду требований. Тестовое задание - задание в тестовой форме, прошедшее электронную проверку и определенным образом оцененное.
Формы тестовых заданий I. Закрытая форма.
Задание содержит основную часть и ответы, сформулированное составителем. Инструкция указывает: найти номер правильного ответа. Задание содержит два-три правильных ответа. Эта форма технологична, так как позволяет выявить определенный объем знаний.
ТРЕБОВАНИЯ К ТЕСТУ ЗАКРЫТОЙ ФОРМЫ
1. Стандартная инструкция.
2. Равная правдоподобность заданий.
3. Полная ясность текста (не должно быть разночтений).
4. Предельная краткость (5-6 слов).
5. Простая стилистическая конструкция.
6. В задание включается больше слов, чем в ответ.
7. Все ответы, правильные и неправильные, должны быть равны по длине.
8. Исключаются вербальные ассоциации, способствующие выбору правильного ответа.
9. Исключаются лишние слова (на приведенном рисунке, из перечисленных примеров).
10. Необходимо проверять не одно знание, а несколько.
11. Необходимо наличие одной стандартной инструкции (например, обведите кружком номер правильного ответа).
12. Правильный ответ должен быть только один.
13. Не должно быть противоречий между основной частью и ответами (например, на космонавта в Космосе действуют:
- сила тяжести;
- сила точки опоры;
- не действуют никакие силы).
14. Исключить повторяющиеся слова в ответах: основная земледельческая зона расположена:
- в зоне тайги;
- в лесостепной зоне;
- в зоне смешанных лесов,
Формы организации учебного процесса в высшей школе 147
- в степной зоне.
П. Открытая форма. Студент сам формулирует ответ, словесный или графический. Эти тесты хороши для текущего контроля. Инструкция к ним гласит: "Дополните...".
ТРЕБОВАНИЯ К ТЕСТУ ОТКРЫТОЙ ФОРМЫ
1. Дополняющее слово ставится в конце.
2. Оно должно быть единственным.
3. Все прочерки должны быть одинаковой длины. Например:
Первым греческим философом был______________.
Соли высших жирных кислот называются_____________.
Скорость света в вакууме равна_____________.
III. Задания на соответствие.
Задание содержит два множества, правый столбик - для выбора, левый - для ответа. В правом на 1-2 элемента больше. Инструкция - установить соответствие.
Например:
реплики высказывания авторы
IV. Задания на установление правильной последовательности (тесты хороши для технических специальностей, так как содержат знание алгоритма).
Инструкция: установить правильную последовательность сборки.
Например:
В столбце не по порядку даются названия деталей и частей механизма.
Оценка тестов может быть:
• полигамическая, если из 10 заданий одно неправильное, то сумма баллов равна 9;
• дихотомическая (сделал - 1, не сделал - 0).
Перечень характеристик тестовых заданий
1. Содержание. Чем полнее отобрано содержание курса в тестовом задании, тем выше валидность теста. 360 заданий выполняются приблизительно за 1,5-2 часа.
Требования к содержанию тестового задания:
• предметная чистота (чем меньше междисциплинарных элементов, тем чище содержание дисциплины);
• значимость содержания. Содержание ранжируется. Это очень сложный процесс, так как следует выделить базис дисциплины;
• содержание должно быть вариативным, репрезентативным (более полно отражать знание курса);
• содержание должно быть научно достоверным (отражать современные взгляды).
2. Формы тестового задания. Выбор формы задания зависит от:
• содержания курса;
• цели создания теста (контроля);
• умения разработчика.
3. Степень трудности: задания должны быть разной трудности; есть одно-два задания, которые не может сделать никто; одно-два задания, которые должны выполнить все; 60-70% составляют задания средней трудности.
4. Дифференцирующая способность. Знающие студенты должны выполнить задание, не знающие - не в состоянии его выполнить.
5. Локальная независимость: выполнение заданий не зависит от результатов выполнения других форм работы.
6. Информативность заданий. Каждое задание выполняет информационную функцию.
7. Коррелируемость задания с критерием.
В российской высшей школе исследованиями в области тестирования занимаются: в Москве - текстильная академия, мелиоративная академия, Университет дружбы народов, МИФИ; в Санкт-Петербурге - медицинская академия; в Красноярске - исследовательский тестологический центр; в Новгородском университете организована лаборатория тестового контроля.
Этапы разработки тестовых заданий
Выбор содержания заданий.
2. Выбор формы заданий.
3. Создание инструкции и описания теста.
4. Апробация теста (сбор эмпирических данных).
5. Обработка эмпирических данных.
6. Интерпретация результатов обработки.
7. Экспертиза качества теста.
Методы оценки критериев качества тестов
Классическая теория тестов опирается на теорию корреляции, главными параметрами которой являются надежность и валидность. Основы классических тестов составляет идея их параллельности. Параллельными называются тесты, в которых истинные и ошибочные компоненты равны на одной и той же выборке испытуемых. Они имеют одни и те же элементы содержания, одну и ту же трудность заданий.
Надежность - устойчивость результатов теста, получаемых при его применении. Существуют следующие методы оценивания надежности:
1. Параллельное тестирование в двух группах.
2. Ретестовая надежность (повторное тестирование).
3. Расщепление теста (тест расщепляют на две части по четным и нечетным номерам заданий). Чем выше корреляция между двумя частями, тем выше надежность. Существуют тесты на выявление знаний (dominitest) и на выявление навыков (masteritest).
Валндность - пригодность теста, т.е. способность качественно измерять то, для чего он создан по замыслу авторов. Оценка валидности производится по результатам тестирования и результатам экзамена и профессиональной деятельности, которые должны иметь высокий уровень корреляции.
Раньше данные тестирования подвергались статистической обработке, а сегодня конечный результат достигается с помощью математического структурного анализа. Теория математического структурного анализа основывается на том, что человеческие знания имеют некоторую латентную переменную. Идея этой переменной (параметра) и легла в основу тестирования. Основное предположение матструктурного анализа состоит в том, что между результатами теста и измеряемыми параметрами есть функциональная зависимость, позволяющая с помощью анализа и оценки этих параметров создавать представление о знании человека.
Недостатки традиционного тестирования:
• зависимость оценки знаний от уровня трудности заданий;
• зависимость оценки трудности задания от уровня подготовленности студентов;
• один инструмент оценки не может оценивать разное знание студентов.