Психолого-педагогического исследования
Методы опроса психолого-педагогического исследования представляют собой письменные или устные, непосредственные или опосредованные обращения исследователя к респондентам с вопросами, содержание ответов на которые раскрывает отдельные стороны изучаемой проблемы. К этим методам прибегают в тех случаях, когда источником необходимой информации становятся люди – непосредственные участники изучаемых процессов и явлений. С помощью методов опроса можно получить информацию как о событиях и фактах, так и о мнениях, оценках, предпочтениях опрашиваемых.
Значение методов опроса в психологии и педагогике тем больше, чем слабее обеспеченность изучаемой сферы (психолого-педагогические процессы и явления) исследовательской информацией, и чем менее эта сфера доступна непосредственному наблюдению. В месте с тем, методы опроса не универсальны. Наиболее плодотворно они используются в сочетании с другими методами психолого-педагогического исследования.
Широкое применение методов опроса объясняется тем, что информация, получаемая от респондентов, чаще богаче и подробнее чем та, которую можно получить с использованием других методов. Она легко поддается обработке, получить ее можно сравнительно оперативно и дешево.
Среди недостатков методов опроса можно указать следующие, во-первых, – субъективность получаемой информации: респонденты нередко склонны переоценивать значение некоторых фактов или явлений, своей роли в них; во-вторых, искажение информации может происходить за счет методических ошибок при составлении инструментария исследования, определении выборочной совокупности (“выборки”), интерпретации данных; в-третьих, необходимые сведения могут быть просто неизвестны опрашиваемым.
Методы опроса в психолого-педагогических исследованиях применяются в следующих формах: в виде интервью (устного опроса), анкетирования (письменного опроса), экспертного опроса, тестирования (со стандартизированными формами оценки результатов опроса), а также с использованием социометрии, позволяющей на основе опроса выявить межличностные отношения в группе людей. Кратко охарактеризуем каждый из указанных методов.
Анкетирование– метод эмпирического исследования, основанный на опросе значительного числа респондентов и используемый для получения информации о типичности тех или иных психолого-педагогических явлений. Этот метод дает возможность установить общие взгляды, мнения людей по тем или иным вопросам; выявить мотивацию их деятельности, систему отношений.
Различают следующие варианты анкетирования – личностное (при непосредственном контакте исследователя и респондента) или опосредованное (анкеты распространяются раздаточным способом, а респонденты отвечают на них в удобное время); индивидуальное или групповое; сплошное или выборочное.
Как и в беседе, в основе анкетирования лежит специальный вопросник – анкета. Исходя из того, что анкета – это разработанный в соответствии с установленными правилами документ исследования, содержащий упорядоченный по содержанию и форме ряд вопросов и высказываний, часто с вариантами ответов на них, разработка ее требует особого внимания, вдумчивости.
Целесообразно, чтобы анкета включала в себя три смысловые части: вводную, содержащую цель и мотивировку анкетирования, значимость участия в нем респондента, гарантию тайны ответов и четкое изложение правил заполнения анкеты; основную, состоящую из перечня вопросов, на которые надлежит дать ответ; социально-демографическую, призванную выявить основные биографические данные и социальное положение опрашиваемого.
Практика показывает, что к разработке анкеты исследования целесообразно предъявлять следующие основные требования:
– апробирование (пилотаж) анкеты с целью проверки и оценки ее обоснованности (валидности), поиска оптимального варианта и объема вопросов;
– разъяснение перед началом опроса его целей и значения для результатов исследования;
– корректная постановка вопросов, предполагающая одновременно уважительное отношение к респондентам;
– оставление возможности анонимных ответов;
– исключение возможности двусмысленного толкования вопросов и использования специальных терминов и иностранных слов, которые могут быть непонятны респондентам;
– следить за тем, чтобы в вопросе не предлагалось оценить несколько фактов сразу или высказать мнение о нескольких событиях одновременно.
– построение анкеты по принципу: от более простых вопросов к более сложным;
– не увлекаться многословными, длинными вопросами и предложенными вариантами ответов на них, так как это затрудняет восприятие и увеличивает время на их заполнение;
– постановка вопросов линейным (каждый последующий вопрос развивает, конкретизирует предыдущий) и перекрестным (ответ на один вопрос проверяет достоверность ответа на другой вопрос) способами создает у опрашиваемых благоприятную психологическую установку и желание давать искренние ответы;
– предусматривать возможность быстрой обработки большого количества ответов с использованием методов математической статистики.
Опыт проведения опросов свидетельствует о том, что ответы даются содержательнее и полнее, когда анкета включает небольшое количество вопросов (не более 7-10).
При составлении анкеты используются несколько вариантов построения вопросов. Это открытые, закрытые и полузакрытые вопросы, а также вопросы-фильтры.
Открытыми называют вопросы, на которые респонденты должны самостоятельно дать ответы и занести их в специально отведенные для этого места в анкете или в специальном бланке. Такие вопросы используют в тех случаях, когда исследователь стремиться привлечь опрашиваемого к активной работе по формированию предложений, советов по какой-либо проблеме или когда не совсем ясен набор альтернатив по задаваемому вопросу.
Закрытыми называются вопросы, к которым в анкете предлагаются возможные варианты ответов. Они используются в тех случаях, когда исследователь четко представляет себе, какими могут быть ответы на вопрос, или когда надо оценить что-либо по определенным, важным для изучения признакам и т. д. Преимуществами закрытых вопросов являются: возможность исключить неправильное понимание вопроса, сопоставить ответы различных групп респондентов, а также простота заполнения анкеты и обработки полученных данных.
Полузакрытый вопрос отличается от закрытого тем, что кроме предложенных вариантов ответов, имеется своеобразная строка, на которой респондент может отразить свое личное мнение по существу вопроса. Это делается в тех случаях, если исследователь не уверен, что для выражения своего мнения опрашиваемому будет достаточно списка возможных альтернатив.
Количество вариантов ответов в закрытых и полузакрытых вопросах не должно быть слишком большим – максимум до 15. Кроме того, в любом вопросе закрытого или полузакрытого типа следует иметь альтернативу “затрудняюсь ответить”. Это нужно для того, чтобы могли отразить свою позицию респонденты, которые не знают, как ответить на вопрос, или не имеют определенного мнения по затронутой в нем проблеме.
Довольно часто в анкетах используются вопросы-фильтры. Они состоят одновременно как бы из двух вопросов: сначала выясняется относится ли опрашиваемый к определенной группе или известен ли ему факт (явление), о котором пойдет далее речь. Затем респондентам ответившим утвердительно предлагается высказать свое мнение или оценку факта, события, свойства.
Существует еще одна разновидность вопросов анкеты, применяемых в психолого-педагогических исследованиях – вопросы на ранжирование. Их используют тогда, когда среди множества вариантов ответов требуется выявить наиболее важные и значимые для респондента. В этом случае опрашиваемый проставляет каждому ответу соответствующие номера в зависимости от степени его значимости.
Существенное значение имеет предварительное апробирование анкеты. Внешние признаки ответов (стереотипность, односложность, альтернативность, значительное число ответов типа – “не знаю”, “затрудняюсь ответить” или пропусков, белых полос; “угадывание” ответа желательного исследователю и т.п.) говорят о том, что формулировки вопросов сложны, неточны, в известной мере дублируют один другого, сходны по содержанию, анкетируемые не осознали значения проводимого опроса, важности правдивых ответов для исследователя.
Анкетный опрос доступный, но и наиболее беззащитный от всякого рода субъективистских “рифов”, метод исследования. Его нельзя абсолютизировать, увлекаться “анкетоманией”. Исследователю целесообразно прибегать к нему лишь в случаях, когда возникает необходимость выявить мнение большого количества незнакомых ему людей. Иначе говоря, нельзя подменять изучение реальных фактов изучением мнения о них. При правильном применении анкетирование может получить достоверную и объективную информацию.
Интервью – разновидность метода опроса, специальный вид целенаправленного общения с человеком или группой людей. В основе интервью лежит обычная беседа. Однако в отличии от нее роли собеседников закреплены, нормированы, а цели определяются замыслом и задачами проводимого исследования.
Специфика интервью состоит в том, что исследователь определяет заблаговременно лишь тему предстоящего исследования и основные вопросы, на которые он хотел бы получить ответы. Все необходимые сведения, как правило, черпаются из информации, полученной в процессе общения лица, берущего интервью (интервьюера), с лицом, дающим его. От характера этого общения, от тесноты контакта и степени взаимопонимания сторон во многом зависит успех интервью, полнота и качество полученной информации.
Интервью имеет свои достоинства и недостатки по сравнению с анкетированием. Главное различие между ними состоит в форме контакта. При анкетировании общение исследователя и опрашиваемого опосредуются анкетой. Вопросы, содержащие в ней, их смысл респондент интерпретирует самостоятельно в пределах имеющихся у него знаний. Он формирует ответ и фиксирует его в анкете тем способом, который указан в тексте анкеты, либо объявлен лицом, проводящим опрос. При проведении интервью контакт между исследователем и человеком – источником информации осуществляется при помощи специалиста (интервьюера), который задает вопросы, предусмотренные программой исследования, организует и направляет беседу с респондентами, а также фиксирует полученные ответы согласно инструкции.
В этом случае явно выявляются следующие преимущества интервью: во-первых, в ходе работы с опрашиваемыми удается учесть его уровень подготовки, определить отношение к теме опроса, отдельным проблемам, зафиксировать его интонацию и мимику. Во-вторых, появляется возможность гибко менять формулировки вопросов с учетом личности опрашиваемого и содержания предшествующих ответов. В-третьих, можно поставить дополнительные (уточняющие, контрольные, наводящие, поясняющие и т.п.) вопросы. В-четвертых, приближенность интервью к обыденному разговору способствует возникновению непринужденной обстановки общения и повышению искренности ответов. В-пятых, интервьюер может вести наблюдение за психологическими реакциями собеседника и при необходимости корректировать беседу.
В качестве основного недостатка этого метода следует выделить большую трудоемкость работы при незначительном количестве опрашиваемых респондентов.
По цели, которую стремиться реализовать исследователь, выделяют интервью мнений, выясняющее оценки явлений, событий, и интервью документальное, связанное с установлением фактов.1
Одним из наиболее эффективных методов сбора информации в психолого-педагогическом исследовании является экспертный опрос, предполагающий получение данных с помощью знаний компетентных лиц. Под ними понимаются не обычные респонденты, а высококвалифицированные, опытные специалисты, которые дают заключение при рассмотрении какого-либо вопроса. Результаты опросов, основанные на суждении специалистов, называются экспертными оценками. Поэтому этот метод нередко называют методом экспертных оценок.
Метод экспертного опроса в психолого-педагогических исследованиях применяется для решения следующих задач:
– уточнения основных положений методики исследования, определение процедурных вопросов, выбора методов и приемов сбора и обработки информации;
– оценки достоверности и уточнения данных массовых опросов, особенно, когда существует опасность их искажения;
– более глубокого анализа результатов исследования и прогнозирования характера изменений изучаемого психолого-педагогического явления;
– подтверждения и уточнения сведений, полученных с помощью других методов;
– анализа результатов исследования, особенно, если они допускают различное толкование.
В каждом из упомянутых случаев экспертный опрос подчинен целям и задачам конкретного исследования и является одним из инструментов для сбора информации об изучаемом объекте. Повышение достоверности результатов экспертного опроса достигается с помощью логических и статистических процедур, подбора специалистов, организации опроса, обработки полученных данных.
Практика показывает, что чем больше экспертов оценивает, тем более точным является общий результат оценки, тем точнее диагностируется уровень развития личности человека, группы респондентов. Учесть мнение всех экспертов по всем оцениваемым параметрам – задача трудная. С целью оптимизации обобщения мнений экспертов обычно применяются количественные оценки. Экспертам предлагается выразить свое мнение в пятибалльной (иногда трех, четырехбалльной) дискретной шкале. Применительно к оценке качества личности обычно применяют следующую шкалу:
5 – очень высокий уровень развития данного качества личности, оно стало чертой характера, проявляется в различных видах деятельности;
4 – высокий уровень развития данного качества личности, но проявляется оно еще не во всех видах деятельности;
3 – оцениваемое и противоположное качество личности выражены не рельефно и в целом уравновешивают друг друга;
2 – заметно более выражено и чаще проявляется качество личности, противоположное оцениваемому;
1 – противоположное оцениваемому качество четко выражено и проявляется в различных видах деятельности, является чертой характера личности.
Это самые общие критерии для формализации мнений экспертов. В каждом конкретном случае при оценке тех или иных параметров определяются более конкретные и содержательные критерии.
В том случае, когда мнение экспертов выражается количественно, то рассматриваемый метод исследования нередко называют методом полярных баллов.
Формализация мнений экспертов позволяет использовать при обработке результатов исследования математико-статистические методы1 и современную вычислительную технику. Она может производиться не только в шкале порядка, но и путем ранжирования личностей (групп или микрогрупп), то есть путем расположения их в порядке возрастания (или убывания) того или иного их признака.
Допустим, можно составить список респондентов по степени их дисциплинированности. Если первым в списке будет самый дисциплинированный из них, вторым – ближайший по степени развития этого качества личности и т. д. Замыкать список будет самый недисциплинированный. Естественно, что у каждого эксперта данный список получится строго индивидуальным. Меру согласованности экспертов можно измерить с помощью применения различных коэффициентов корреляции, допустим, коэффициента корреляции Спирмена. Для примера: два эксперта ранжировали специалистов по степени их дисциплинированности в таком порядке:
| I эксперт | II эксперт | d | d2 | |
| А. | ||||
| Б. | -2 | |||
| В. | -1 | |||
| Г. | ||||
| Д. |
Сумма d2 = 6
Коэффициент корреляции Спирмена находится по следующей формуле:
где, S - коэффициент корреляции рангов ( он может колебаться в диапазоне от +1 до -1) d - разность номеров рангов
d2- квадрат разности номеров рангов
n - число сравниваемых личностей
Подставим полученные результаты в предложенную формулу:
Это довольно высокий уровень согласованности мнений экспертов. На практике встречаются случаи, когда единство мнений экспертов оценивается и отрицательной величиной коэффициента корреляции Спирмена. При S = – 1 – налицо полная противоположность мнений экспертов. При S = + 1 – их полное совпадение. Однако в большинстве случаев S колеблется от 0,5 до 0,9. Такова обычно реально степень совпадения мнений экспертов, то есть людей, которые знают данных респондентов. Степень точности экспертных оценок зависит от уровня квалификации экспертов, их количества и количества объектов ранжирования. Важно, чтобы эксперты обладали наблюдательностью, жизненным опытом, практикой работы с людьми, чтобы их мнение не было деформировано конфликтными отношениями с оцениваемыми личностями или отношениями внеслужебной зависимости. Таким требованиям в наибольшей степени отвечают руководители коллективов. Однако весьма важны и полезны оценки товарищей респондентов. Сильное различие в оценках “снизу” и “сверху” может быть признаком незнания существенных особенностей оцениваемой личности.
Полагают, что точность экспертных оценок зависит от количества экспертов. В некоторых случаях используют мнение 15-20 экспертов. Это объясняется тем, что отношения между респондентами носят в большинстве случаев многогранный характер. Количество ранжируемых личностных качеств или других признаков, как правило, не должно быть более 20, и наиболее надежна эта процедура, когда их число меньше 10.
Метод экспертных оценок называют еще методом ГОЛ (групповой оценки личности). За рубежом его нередко называют “методом компетентных судей” или “рейтингом”. Когда же в роли эксперта выступает каждый член группы при оценке взаимоотношений между собой и другими респондентами (по определенному критерию), то метод экспертных оценок превращается в социометрическую процедуру, один из основных способов исследования в социальных психологии и педагогике.
Социометрический метод (метод социометрии)позволяет выявить межличностные отношения в группе людей с помощью их предварительного опроса (подробнее смотри в приложении 2).
Взаимоотношения людей предопределяются объективной необходимостью совместной деятельности (она рождает официальную структуру групп) и эмоциональным фактором – симпатиями и антипатиями (этот фактор порождает неофициальные взаимоотношения в группе). Узнать неофициальные взаимоотношения людей, структуру их взаимоотношений, симпатий и антипатий можно с помощью простых вопросов типа “С кем бы Вы желали провести свободное время?”, “С кем бы Вы желали работать?” и т.п. Эти вопросы есть критерии социометрического выбора. Они могут быть самыми разнообразными.
Для исследования структуры взаимоотношений в группе применяется социометрия в двух вариантах: параметрическая и непараметрическая. Параметрическая социометрия состоит в том, что испытуемым предлагается сделать строго определенное количество выборов по заданному критерию. Например, назвать пять товарищей, с которыми он хотел бы вместе проводить свободное время. Непараметрическая социометрия позволяет выбирать и отвергать любое число лиц при условии, что испытуемые положительно относятся к исследования. В противном случае могут быть ответы: “Выбираю всех” или “Отвергаю всех”, которые существенно искажают результаты обследования.
При этом важно, чтобы социометрический выбор происходил по значимым критериям. Это связано с тем, что структура межличностных отношений, вскрытая по разным критериям, будет неодинакова. И подбирая какой-то вопрос, критерий социометрического выбора, исследователь как бы прогнозирует, какую структуру группы он желал бы вскрыть: ту, которая проявляется в процессе отдыха, или же в процессе совместной служебной деятельности. Если социометрическая процедура по двум и более критериям, то для каждого критерия составляется отдельная матрица. Ниже приведен пример составления одной из таких матриц.
МАТРИЦА ВЫБОРА
| Кто Выбирает | Кого выбирают | Итого | ||||||||||
| + | + | |||||||||||
| + | + | + | ||||||||||
| + | + | + | + | |||||||||
| + | ||||||||||||
| + | + | |||||||||||
| + | + | |||||||||||
| + | + | + | ||||||||||
| + | ||||||||||||
| + | ||||||||||||
| + | + | |||||||||||
| Итого |
В этой матрице каждый номер по порядку соответствует определенной фамилии. Результаты социометрического опроса служат основой для анализа взаимоотношений студентов. Путем несложных расчетов по количеству сделанных положительных или отрицательных выборов и взаимовыборов можно определить следующие социометрические индексы: потребность в общении, социометрический статус члена группы, психологическую совместимость, групповое единство, групповую разобщенность, груповую сплоченность. Кроме этого имеется возможность выявить лидеров группы, наличие в ней микрогрупп, а также членов группы, которые не пользуются в ней авторитетом.
Для более наглядного представления системы симпатий и антипатий обследуемых применяется социограмма. Для составления социограмм принята определенная символика. Используя ее, на социограмме отражают результаты социометрического измерения, приведенные в матрице выбора.
На ней стрелки указывают, кто кого выбирает. Если стрелка стоит в двух концах линии, то выбор взаимный. Иногда пунктиром на социограмме отображено и негативное отношение испытуемых друг к другу.
При проведении социометрического опроса целесообразно обеспечить анонимность получения информации с целью повышения объективности исследования. Результаты исследования должны интерпретироваться осторожно.
Достоинствами социометрии являются, во-первых, возможность за короткое время собрать значительный материал, который поддается статистической обработке и может быть представлен наглядно, во-вторых, возможность регистрации отношений между всеми членами группы. Недостатками социометрии являются, во-первых, фиксация преимущественно эмоциональных отношений, выраженных в симпатиях и антипатиях, во-вторых, не выявляются истинные мотивы выборов, в-третьих, число взаимных выборов может отражать не столько сплоченность группы, сколько дружественные связи отдельных микрогрупп.
Таким образом, социометрия позволяет в кратчайший срок вскрыть структуру межличностных отношений в группе, систему симпатий и антипатий, однако она не всегда позволяет достаточно надежно диагностировать содержательные характеристики общения, взаимоотношения.
Личность и группа являются специфическими объектами психолого-педагогического исследования, обладающими существенными особенностями, что предопределяет применение ряда специальных методов изучения продуктивности системы воздействия на эти объекты.
Одним из них выступает – метод тестирования, то есть выполнения испытуемым заданий определенного рода с точными способами оценки результатов и их числового выражения. Этот метод позволяет выявить уровень знаний, умений и навыков, способностей и других качеств личности, а также их соответствия определенным нормам путем анализа способов выполнения испытуемым ряда специальных заданий. Такие задания принято называть тестами.
“Тест – это стандартизированное задание или особым образом связанные между собой задания, которые позволяют исследователю диагностировать меру выраженности изучаемого свойства у испытуемого, его психологические характеристики, а также отношения к тем или иным объектам. В результате тестирования обычно получают некоторую характеристику, показывающую меру выраженности исследуемой особенности у личности. Она должна быть соотносима с установленными для данной категории испытуемых нормами”1. Следовательно, с помощью тестирования можно определить имеющийся уровень развития некоторого свойства у объекта исследования и сравнить его с эталоном или с развитием этого качества у испытуемого в более ранний период.
Тесты характеризуются следующими признаками: объективностью (исключением влияния случайных факторов на испытуемого), модельностью (выраженностью в задании какого-либо сложного, комплексного целого явления), стандартизированностью (установлением одинаковых требований и норм при анализе свойств испытуемых, или процессов и результатов).
Тесты по направленности делятся на тесты достижения, способностей и личности:
а) тесты достижений – в основном дидактические, определяющие уровень овладения учебным материалом, сформированность у обучающихся знаний, навыков и умений. Дидактический тест следует понимать как систему заданий специфической формы и определенного содержания, расположенных в порядке возрастающей трудности, создаваемой с целью объективной оценки структуры и измерения уровня подготовленности обучающихся. Таким образом, дидактический тест целесообразно рассматривать не как обычную совокупность или набор заданий, а как систему, обладающую двумя главными системными факторами: содержательным составом тестовых заданий, образующих наилучшую целостность, и нарастанием трудности от задания к заданию. Принцип нарастания трудности позволяет определить уровень знаний и умений по контролируемой дисциплине, а обязательное ограничение времени тестирования – выявить наличие навыков и умений. Трудность задания как субъективное понятие определяется эмпирически, по величине доли неправильных ответов. Этим трудность отличается от объективного показателя – сложности, под которой понимают совокупность числа понятий, вошедших в задание, числа логических связей между ними и числа операций, необходимых для выполнения задания. Отметим, что задания теста представляют собой не вопросы и не задачи, а утверждения, которые в зависимости от ответов испытуемых превращаются в истинные или ложные;
б) тесты способностей (позволяющие судить не только о результатах в усвоении определенного учебного материала, но и о предпосылках респондента к выполнению заданий данного типа, класса). Такие тесты чаще всего связаны с диагностикой познавательной сферы личности, особенностей мышления и обычно называются интеллектуальными. К ним относятся, например, тест Равена, тест Амтхауэра, субтесты Векслера и др.;
в) тесты личности, дающие возможность по реакции на задания теста судить об особенностях свойств личности – направленности, темпераменте, чертах характера. Проявления свойств личности вызываются посредством предъявления проективного материала (незаконченные предложения, изображения – стимулирующие у респондентов ассоциативные реакции).
Метод тестирования является наиболее спорным и одновременно широко распространенным при исследовании личности. В чем же спорность этого метода? Какие трудности стали осознаваться в тестологии? Что тормозит его распространение?
Во-первых, успешное решение теста в обычных условиях не означает успешность аналогичных умственных усилий в сложной обстановке. Респондент, получивший высокий балл по результатам тестирования в обычных условиях, может оказаться эмоционально неустойчивым к стрессам, теряться в опасной ситуации. Разумеется, в целях приближения условий решения теста к реальным социальным условиям можно создавать напряженность у испытуемых в процессе тестирования, сокращать время на решение теста, вводить элементы имитации этих условий и т. д., но это значительно осложняет применение тестовых методик.
Во-вторых, зная характер тестовых процедур (а скрыть их при массовых исследованиях практически невозможно), испытуемому можно просто подготовиться к решению аналогичного теста, а в некоторых случаях и знать результат заранее. Одним словом, может возникнуть эффект, когда некоторые респонденты лучше решат тест не в силу своих способностей, а в силу своей предусмотрительности, находчивости, смекалки, а иногда и хитрости, беспринципности. И чем больше зависит судьба этого респондента от результатов тестирования, тем выше вероятность проявления им “изворотливости”. Данный факт заставляет идти создателей тестов на различные ухищрения, например, создавать тесты с дублирующими друг друга вопросами. Однако, создать высококачественный тест не так-то просто, не менее сложно и соизмерить результаты, полученные при его решении.
В-третьих, результаты тестирования в данный момент (диагностика) могут существенно разниться с результатами подобных испытаний через значительный промежуток времени в силу неравномерного развития способностей у людей. Одним словом, психолого-педагогическая диагностика не учитывает развития личности, обладает незначительным прогностическими возможностями, имеет как бы ближнюю границу действенности.
В-четвертых, большинство параметров, которые надежно диагностируется тестовыми методиками, не являются ведущими, определяющими качествами личности. Часто они являются отдельными функциями психики, параметрами, регистрирующими изменения в личности. Допустим, можно путем тщательного и долговременного тестирования отобрать людей с развитыми способностями к поиску математических зависимостей. Но значит ли это, что они и будут лучшими даже в области, требующей аналогичных способностей? Нет, не всегда. Специалист может уметь быстро и точно мыслить, но не хотеть напрягать свой интеллект, не иметь интереса к своей специальности, не обладать достаточной ответственностью и т. д. Следовательно, отбирать их необходимо с учетом личностных качеств, направленности, мотивов деятельности. Но как раз эти параметры не могут быть диагностированы разработанными тестовыми методиками.
В настоящее время существуют отработанные, качественные, достаточно эффективные тесты, для которых характерны прежде всего высокая валидность и надежность применения.
Надежность теста – его фундаментальная характеристика, показывающая в какой степени ответы одной и той же личности при ее неоднократном тестировании этим тестом совпадают. Например, если заполнить известную анкету Айзенка с перерывом в несколько дней или месяцев, то не все ответы на поставленные вопросы будут совпадать. Несовпадение результатов тестирования будет особенно рельефно, если испытания проходили в разных условиях, допустим, первое – при стеническом эмоциональном состоянии личности, а второе – астеническом. Конечно, при тестировании важно создавать спокойную обстановку, снимать воздействие на психику внешних раздражителей, давать однотипный инструктаж испытуемым. Но все это далеко не гарантирует полного совпадения ответов одного и того же испытуемого при его тестировании через определенный промежуток времени. Корреляционная зависимость между результатом первого и второго тестирования (оно проводится неоднократно на большом массиве людей) определяет его надежность. Нередко надежность измеряют и с помощью процентов – высчитывается процент вопросов, на которые испытуемый дал один и тот же ответ. У лучших тестов надежность, выраженная коэффициентом корреляции, составляет от 0,6 до 0,9. Если тест не достиг данного уровня надежности, то его применение некорректно.
Валидность теста – мера измерения свойства, качества, явления, которое хотят измерить. Допустим, решая тест на нахождение математических закономерностей, пять респондентов получили следующие результаты:
| Испытуемые | Количество правильно найденных закономерностей | Место в группе | Место согласно оценке Экспертов |
| А | |||
| Б | |||
| М | |||
| Т | |||
| В |
Эти же респонденты были оценены экспертами. Оценка экспертов основывалась на двухлетнем опыте наблюдения за респондентами, давалась по результатам их учебы по предметам, требующим математических способностей. На основе всестороннего изучения было сформировано мнение экспертов. Естественно, что оно гораздо точнее отражало действительный уровень способностей к нахождению математических закономерностей. Наверняка, полного совпадения результатов тестирования с реальным положением дела не будет. И ни один тест не способен дать абсолютного результата. Мера этой неточности и одновременно мера точности теста и измеряется валидностью. Валидность находится путем вычисления коэффициента корреляции между результатом тестирования и действительным уровнем развития диагностируемого качества личности после всестороннего и многопланового исследования испытуемых по данному свойству. В этом случае валидность, найденная с помощью коэффициента корреляции Спирмена, равна 0,9 (она может быть найдена – в большинстве случаев, так и делается – с помощью коэффициента корреляции Пирсона). Это довольно высокий результат. Таким образом, тестовые методики могут быть эффективным инструментом психолого-педагогического исследования.
Возможности метода тестирования нельзя переоценивать. Они должны применяться в совокупности со всеми другими методами. Причем, целесообразно применять не отдельный тест, а их совокупность, то есть батарею тестов, добиваться их высокой надежности и валидности, повышать квалификацию исследователей. Все это создает предпосылки для широкого применения тестовых методик в психолого-педагогических исследованиях.