Обработка результатов тестирования
Производится количественная и качественная обработка результатов. Возможен групповой и индивидуальный анализ данных.
Количественная обработка
1. Индивидуальные показатели по каждому субтесту (за исключением субтестов №3 "Понимание инструкций" и №5"Обобщение") выводятся путем подсчета количества правильно выполненных заданий. Например: если испытуемый в субтесте №1 правильно решил 15 заданий, то его балл по этому субтесту будет равен 15.
Обработка субтеста "Понимание инструкций", направленного на выявление такси динамической особенности, как быстрота, скорость, темп деятельности, проводится следующим образом. Подсчитывается число. правильно выполненных заданий и вычисляется процент их выполнения к общему числу заданий, входящих в субтест При правильном выполнении 91-100% заданий можно сказать, что испытуемый относится к группе лиц с высокими скоростными особенностями; при выполнении 71-90% - испытуемый относится к группе выше средних (близкие к высоким); группу средних по скоростным особенностям составляют те. кто правильно выполнил 31-70% заданий; при выполнении заданий от 11 до 30% испытуемый попадает в группу ниже средних (близкие к медлительным); медлительные выполняют от 0 до 10% заданий.
Результаты субтеста "обобщение" оцениваются в зависимости от качества обобщения 2 баллами, 1 баллом и 0. Для обработки следует использовать таблицы примерных ответов, которые приводятся в конце руководства. Ответы, оцениваемые 2 баллами, приведены в таблице достаточно полно. Только приведенные ответы, а также их синонимические замены, можно оценить 2-мя баллами. Важно помнить, что 2 балла получают только такие ответы, в которых обобщение понятий производится по родовому признаку с указанием его видового отличия.
Перечень приведенных в таблицах ответов, оцениваемых 1 баллом, является менее полным, т.к. здесь у испытуемых гораздо больше возможностей для выбора. После логического анализа 1 баллом можно оценить и ответы, отличающиеся от приведенных в таблице. При этом следует иметь в виду, что 1 балл получают ответы, представляющие собой или широкие категориальные обобщения (обобщения только по родовому признаку), или узкие, частные обобщения (указание только видового отличия). Неправильные ответы оцениваются нулем баллов. Примеры таких ответов приводятся в таблицах.
Максимальное количество баллов, которое может получить испытуемый при выполнении субтеста №5, равно 40.
2. Индивидуальным показателем выполнения теста в целом является сумма баллов, полученных при сложении результатов выполнения всех субтестов, кроме субтеста №3 "Понимание инструкций".
По замыслу, тест в полном его составе принимается за норматив умственного развития (в пределах того круга знаний и умений, который предусмотрен школьными программами). С ним сравнивается число заданий, реально выполненных испытуемым. Устанавливается процент правильно выполненных заданий, и это определяет количественную сторону работы испытуемого.
Максимальное число баллов, которое может получить испытуемый, правильно выполнивший весь тест, составляет 152 (как уже отмечалось, сюда не входят результаты субтеста №3"Понимание инструкций"). Именно по отношению к этому количеству баллов подсчитывается процент фактического выполнения теста испытуемым. Например, если испытуемый получил общий балл по тесту, равный 76, то можно говорить о том, что этот испытуемый приближается к социально-психологическому нормативу, заложенному в тесте, только на 50%. Ниже приводится примерная шкала оценки индивидуальных показателей по тесту.
| Уровень умственного развития | Процент выполненных заданий |
| Очень высокий | 91-100 |
| Высокий | 71-90 |
| Средний | 31-70 |
| Низкий | 11-30 |
| Очень низкий |  0-10 |
3. Для анализа групповых данных относительно их близости к социально-психологическому нормативу, испытуемые подразделяются по результатам тестирования на 5 подгрупп:
1.Наиболее успешные - 10% всех испытуемых;
2.Близкие к успешным - 20% всех испытуемых;
3.Средние по успешности - 40% всех испытуемых;
4.Мало успешные - 20% всех испытуемых;
5.Наименее успешные -10% всех испытуемых.
Для каждой из подгрупп подсчитывается средний процент правильно выполненных заданий. Строится система координат, где по оси абсцисс идут номера подгрупп, по оси ординат - процент выполненных каждой подгруппой заданий. После нанесения соответствующих точек вычерчивается график, отражающий приближение каждой из подгрупп к социально-психологическому нормативу.
Такой же вид обработки можно проводить и по результатам отдельных субтестов. Полученные при этом графики позволяют дать наглядное сравнение успешности выполнения теста в целом (или отдельных субтестов) как учащимися одного класса, так и разных классов.
ПОДГРУППЫ Рис. 1
 |
Пример: тестирование проведено на группе в 100 человек. На основании полученных по тесту баллов выделяем первую подгруппу - 10 человек, получивших наибольшие баллы. Допустим, средний процент выполнения в этой подгруппе равен 85. Вторая подгруппа (20 человек) в среднем выполнила задания на 67%, третья подгруппа (40 человек) - на 43%, четвертая подгруппа (20 человек) на 27%, пятая подгруппа (10 человек) - на 11%.
Находим в системе координат соответствующие точки: А с параметрами 1 и 85, Б с параметрами 2 и 67, В -3 и 43, Г-4 и 27, Д-5 и 11. По точкам строим график (см. рис. 1).
4. Степень приближения каждой подгруппы к социально-психологическому нормативу отражает, насколько члены этой подгруппы соответствуют требованиям, заложенным в задания теста. Представители подгруппы наименее успешных должны привлечь к себе пристальное внимание для оказания им профессиональной помощи в целях преодоления пробелов их умственного развития в виде коррекции или самокоррекции.
Анализ такого рода, проведенный по каждому субтесту в отдельности, выявит степень соответствия учащихся требованиям, предъявляемым к выполнению ими отдельных логических операций (установлению аналогий, классификации, обобщению и т.п.), а также к владению некоторым кругом понятий или оперированию невербальным материалом.
Качественная обработка
1. Поскольку тест предназначен для выпускников средней школы и абитуриентов, особый интерес представляет такой его анализ, который позволил бы выявить преобладающие склонности по трем циклам учебных дисциплин (общественно-гуманитарному, естественнонаучному и физико-математическому). Субтест №8 "Пространственные представления" позволяет сделать заключения о существовании предпосылок к формированию технического мышления.
Прежде всего, необходимо выявить задания теста, относящиеся к тому или иному циклу. Ниже приводятся такие данные для каждого субтеста.
Субтест «Двойные Аналогии» (1 и 2 части)
| Циклы | Форма | Номера заданий |
| 1.Общественно-гуманитарный | А В | 22,24,27,29,34,139,140,142,144,147 21,23,25,27,32,138,140,141,146,151 |
| 2.Естественно-научный | А Б | 21,23,28,31,33,35,141,146,148,149,151 22,28,29,31,33,35,143,145,148,149,150 |
| 3.Физико-математический | А Б | 25,26,30,32,138,143,145,150,152 24,26,30,34,139,142,144,147,152 |
Субтест «Классификации»
| Циклы | Форма | Номера заданий |
| 1.Общественно-гуманитарный | А В | 57,58,60,61,63,65,66,70,74,77 57,59,62,63,71,72,73,75,77,79 |
| 2.Естественно-научный | А В | 56,64,67,68,71,73,75,78,80 56,58,64,66,67,69,74,76,78 |
| 3.Физико-математический | А В | 59,62,69,72,76,79 60,62,65,68,70,80 |
Субтест «Обобщение»
| Циклы | Форма | Номера заданий |
| 1.Общественно-гуманитарный | А В | 81,84,86,87,89,93,94,98 83,85,86,88,89,91,96,98,100 |
| 2.Естественно-научный | А В | 83,88,90,91,92,96,100 82,84,87,92,94,97,99 |
| 3.Физико-математический | А В | 82,85,95,97,99 81,90,93,95 |
Субтест «Логические схемы»
| Циклы | Форма | Номера заданий |
| 1.Общественно-гуманитарный | А В | 105,106,108,112 104,106,108,110 |
| 2.Естественно-научный | А В | 101,103,104 101,102,107,112 |
| 3.Физико-математический | А В | 102,107,109,110,111 103,105,109,111 |
Теперь для того, чтобы выявить успешность выполнения заданий общественно-гуманитарного цикла, необходимость подсчитать число правильных ответов на соответствующие задания в субтестах "Двойные аналогии" (1 и 2 части), "Классификации", "Обобщения", "Логические схемы". Далее, просуммировав эти показатели, найти процент их выполнения к общему числу заданий этого цикла (максимальный балл для ф. А равен 40, для ф. Б - 42). Затем также по четырем субтестам ("Двойные аналогии", "Классификации", "Обобщения" и "Логические схемы") произвести аналогичный подсчет процента выполнения заданий естественно-научного (максимальный балл для ф. А равен 37, для ф. Б - 38) и физико-математического циклов (максимальный балл для ф. А равен 30, для ф. Б - 28). Отдельно подсчитывается процент выполнения заданий на пространственные представления (максимальный балл для обеих форм равен 10).
Хотя в субтестах "Осведомленность" и "Числовые закономерности" в основном используются знания и умения, полученные вне школьной практики, тем не менее можно порекомендовать включать задания этих субтестов в определенные учебные циклы: "Осведомленность" -в общественно-гуманитарный, "Числовые закономерности" - в физико-математический.
Можно предположить, что склонность к общественно-гуманитарным дисциплинам должна обнаружить себя не только в знаниях понятий из этого учебного цикла и в умении ими оперировать, но и в потребности извлекать информацию из других (внешкольных) источников (из книг, журналов, газет, радио, телевидения и т.д.). А это, в свою очередь, формирует широкий кругозор, высокий уровень общей осведомленности.
Аналогичным образом склонность к физико-математическому циклу должна обнаружить себя в умении оперировать как понятиями из этого цикла, так и количественными отношениями (например, как в субтесте "Числовые закономерности").
Поэтому целесообразно баллы, полученные по субтесту "Осведомленность", суммировать с баллами заданий общественно-гуманитарного цикла (в этом случае максимальный балл для ф. А будет 60, для ф. Б - 62), а баллы, полученные по субтесту "Числовые закономерности", - с баллами заданий физико-математического цикла (максимальный балл для ф. А будет уже 45, для ф. Б - 42).
Предпочтительное выполнение заданий с определенным содержанием может свидетельствовать о преобладающих склонностях учащихся, их готовности к обучению по определенному профилю.
Рассмотрим разные варианты, для чего воспользуемся так называемым "тестовым профилем испытуемого".
На рис. 2, 3, 4, 5, представлены результаты тестирования четырех испытуемых, у которых явно выражены склонности по отношению к тем или иным учебным циклам.
На рис. 2 изображены данные испытуемого, наиболее успешно выполнившего задания общественно-гуманитарного цикла; на рис. 3 - естественно-научного; на рис. 4- физико-математического; на рис. 5 - технического.
В этих случаях картина довольно ясная и полученные данные могут быть однозначно использованы в профориентационной работе. Но могут быть и более сложные случаи, например, равновыраженный высокий уровень умственного развития по всем циклам учебных дисциплин или равновыраженный низкий. В этих случаях требуется дополнительная работа по изучению интересов и склонностей и только тогда могут формулироваться рекомендации по выбору дальнейшего профиля обучения.
Рис. 2
Рис. 3
Рис. 4
Рис. 5
2. Кроме такого анализа, можно провести более углубленный качественный анализ результатов (как для отдельного ученика, так и для группы учащихся) для того, чтобы наметить затем программы коррекции или самокоррекции умственного развития. В этом случае уместно проанализировать успешность выполнения разных субтестов, что позволит выявить специфику умственного развития учащихся. Такая информация может быть получена при сравнении:
1) субтестов "Осведомленность", с одной стороны, и "Аналогии", "Классификации", "Обобщения", "Логические схемы", с другой; может быть обнаружено преимущественное выполнение субтеста "Осведомленность" по сравнению с субтестами на выполнение логических операций или наоборот;
2) субтестов "Аналогии", "Классификации", "Обобщения" "Логические схемы" между собой; может быть выявлено отставание или преимущественное выполнение одних логических
операций по сравнению с другими (например, хуже остальных развито мышление по аналогии и лучше - классификации);
3) вербальных субтестов, с одной стороны, и субтеста на пространственные представления, с другой; может быть выявлено а) преобладание вербальных показателей над пространственными; б) их равные показатели; в) преобладание пространственных показателей над вербальными.
На основании результатов сравнительного анализа выполнения отдельных субтестов можно для каждого ученика графически изобразить его индивидуальную структуру умственного развития.
Например: испытуемый А первый субтест выполнил на 55%; второй - на 20%; третий -на 40%; четвертый - на 60%; пятый - на 55%; шестой - на 15%; седьмой - на 30% и восьмой -на 30%. Построив систему координат, где по оси абсцисс обозначены номера субтестов, а по оси ординат - процент выполнения заданий, мы получим следующий график (рис. 6).
Рис. 6
При таком анализе может выявиться неравномерность умственного развития учащегося. На рис. 6 видно, что-у учащего имеет место отставание в развитии таких логических операций, как установление аналогий (субтест№2) и родо-видовых отношений (субтест №6), по сравнению с другими логическими операциями - классификациями (субтест №4) и обобщениями (субтест №5).
Кроме того, невысокое развитие имеют навыки невербального характера (установление количественных отношений - субтест №7 и пространственные представления - субтест №8).
Выявление причин неравномерности умственного развития учащегося потребует обратиться к анализу условий его жизни, методов преподавания, уровня и характера школ и т.п.
Формы А
Правильные ответы
Субтест 1-А
| б | б | б | г | д | д | д | б | а | г | а | а | д | б | г | д | г | а | а | в |
Субтест 2-А
| а | б | б | д | г | б | а | д | а | д | а | г | в | б | в |
Субтест 3-А
| Пишется последняя буква фамилии испытуемого и буква «я» |      |  |  |
| Любая буква |   |  
 | 
|
 
|
   
|    |  . . . . | ||||||||||
 
|    |
   | 
| ||||||||||
  |    |
|
|
Субтест 4-А
| а е | в д | б д | б д | а г | г д | б д | д е | а б | в д | а г | б в | в е | б д | в е | б д | в е | б е | в д | г е | в г | в г | а б | г д | в д |
Субтест 6-А
  | 
|  |  |
  |  |  |  |
|   | 
 |  |
Субтест 7-А
Субтест 8-А
| в | г | б | б | а | в | г | а | в | г |
Субтест 9-А
| д | д | в | а | б | г | в | б | в | б | г | д | д | а | б |
Субтест 5-А
| № п/п | 2 балла | 1 балл | 0 баллов |
| Виды государственного правления; основные формы правления; государственный строй | Государство; строй | Политика | |
| Науки о неживой природе; точные науки | Науки, предметы | Наука о звездах | |
| Виды тканей; ткани | Органы | Внутренние органы; составные части человека | |
| Род литературы; жанр в литературе | Литература; вид литературы | Литературные направления; книги | |
| Состояния тела | Физические понятия | Изменение, движение | |
| Литературные приемы; приемы выразительности | Литературные понятия | Выдумка, преувеличение, аллегория | |
| Художественный стиль в архитектуре; стиль в архитектуре | Архитектура; стиль | Искусство; дома, здания | |
| Инертные газы | Газы; химические вещества; химические элементы | Химия; физика | |
| Раздел грамматики; разделы русского языка | Грамматика; разделы лексики | Правописание, грамотность | |
| Простые вещества; простые химические элементы | Химические элементы; химические вещества | Химия | |
| Свойства всего живого; жизненно важные функции | Процессы в организме; биологические процессы | Жизнь; необходимое для человека; человеческие потребности | |
| Минеральные удобрения | Химические вещества; удобрения | Химия | |
| Общественные науки | Науки; предметы | Политика; политика государства | |
| Виды поэтических произведений; стихотворные произведения | Литературные произведения; литературная лирика | Стихотворение; легенда; искусство | |
| Виды теплопередачи; тепловые процессы | Физические явления; физические понятия | Радиация; физика | |
| Органы чувств; органы восприятия | Органы; внешние органы | Части человека; части тела | |
| Физические характеристики; физические явления | Распространение частиц; волны | Телевизор; скорость; физика | |
| Органы государства; органы власти | Государство; органы порядка | Трибунал | |
| Простые механизмы; подъемные приспособления | Механика; механизмы | равновесие; золотое правило механики | |
| Углеводы; биологический источник энергии | Питательные вещества | Биология |
Формы Б
Правильные ответы
Субтест 1-Б
 2 | |||||||||||||||||||
| в | б | б | г | д | а | в | д | в | в | б | г | а | б | а | г | г | д | г | г |
Субтест 2-Б
| в | д | г | а | а | а | б | б | б | г | а | а | г | д | б |
Субтест 3-Б
| Пишется буква «ь» и первая буква фамилии испытуемого |         |  | |
| Любая число |    |
 |  594162 |
|  
|  |  . . . . | ||||||||||
|   |  
|
| ||||||||||
| |   |
|
|
Субтест 4-Б
| а е | в е | а в | а е | б г | б в | б д | б г | в г | в д | д е | б в | б г | б е | в д | в д | д е | а е | б в | в д | а е | б д | б в | а в | а г |
Субтест 6-А
 |  |  |  |
 |  |  |  |
|  | 
|  |
Субтест 7-Б
Субтест 8-Б
| а | б | в | г | б | а | б | в | в | г |
Субтест 9-Б
| д | г | б | в | б | в | г | б | а | а | г | б | д | а | в |
Субтест 5-А
| № п/п | 2 балла | 1 балл | 0 баллов |
| Физические характеристики; физические величины | Физические понятия; характеристики | Физика | |
| Металлы | Химические элементы | Химия | |
| Виды речи | Речь; разговор | Литература; произведение | |
| Галогены | Химические элементы | Химия | |
| Форма власти; виды правления | Устройство государства; социальный строй государства | Политика | |
| Положительные качества человека; положительные черты характера | Черты человека; черты характера | Характер; качество | |
| Сложные вещества; химические соединения | Химические вещества | Вредные вещества; химия | |
| Естественные науки | Науки; виды наук | Наука о звездах | |
| Художественные направления; направления в искусстве | Литературные направления; искусство | Понятия; литературные понятия | |
| Виды прогрессий; упорядоченная последовательность чисел | Ряды чисел; числа | Математика; математические решения | |
| Род литературного произведения; жанр в литературе | Литература; вид в литературе | Разделы литературы; книги | |
| Биология; разделы биологии; естественные науки | Наука | Науки о будущем; биологические понятия | |
| Простые вещества; простые химические вещества | Химические вещества | Окисление; коррозия | |
| Жидкие металлы | Тяжелые металлы; металлы | Радиоактивные вещества | |
| Виды конвекций; направленный поток воздуха | Конвекция; физические явления | Свист в ушах; печь; холод | |
| Философские направления | Философия | Науки о теории; разные взгляды человека | |
| Основные нервные процессы; нервные процессы; ответные реакции на раздражение | Реакции; процессы | Рефлексы; нервная система | |
| Виды литературы; виды литературных произведений | Литература; проза | Издания; книги | |
| Методы селекции; селекция | Биологические методы | Химические реакции; биология | |
| Способ производства | Компоненты теории Маркса | Экономика; феодализм; производственные прцессы |
| |
* Весьма существенно для получения сравниваемых результатов строго воспроизводить текст инструкции. Можно отказаться от ее прочтения, если она будет выучена наизусть, с сохранением одних и тех же интонаций.