Контроль посредством экспериментальных схем
План эксперимента задает форму контроля независимой переменной: предъявляются ее разные условия одному и тому же испытуемому или группам испытуемых – и одновременно условия фиксации первичных показателей зависимой переменной. При последующей обработке данных на основе первичных показателей могут быть предложены вторичные показатели, разрабатываемые с целью укрупнения единиц анализа эмпирических данных. Так, переход от матриц переменных к матрицам их интеркорреляций позволяет осуществлять те или иные процедуры сокращения размерности данных. Иногда сложность процедур обработки данных ошибочно рассматривается как критерий того, что имело место экспериментальное исследование.
Экспериментальный контроль, кроме управления НП, означает также контроль побочных, смешивающихся или сопутствующих переменных. Смешения НП с ними представляют угрозы валидности эксперимента. Рассмотрение факторов задачи, последовательности задания уровней НП, времени, состава групп и др. в качестве управляемых переменных не обязательно переводит их в статус независимых. Иными словами, экспериментальный контроль включает не только управление НП, но и формы контроля других переменных. Такие формы контроля, как контроль несистематической изменчивости, контроль систематических смешений и разных видов сопутствующего смешения, подробно представлены в учебнике Р. Готтсданкера и здесь не рассматриваются. Важно, однако, отметить, что не следует смешивать решение следующих вопросов: 1) имел ли место результат действия НП, т.е. вывод об экспериментальном эффекте; 2) имела ли место именно подразумеваемая в гипотезе каузальная зависимость, т.е. вывод об исследуемой зависимости. Экспериментальные схемы лишь частично служат основанием ответов на эти вопросы.
Обобщение относительно вида установленной зависимости, т.е. решение вопроса о том, что установлена именно представленная в гипотезе связь, а не какая-то другая, зависит от оценки внутренней и операциональной валидности эксперимента. Контроль угроз внутренней валидности со стороны тех или иных источников смешений или ненадежности данных рассматривается в отношении к конкретным экспериментальным схемам [16, 32]. Введение уровней вторичной НП для уточнения эффекта действия первичной НП означает переход к факторным схемам и служит как улучшению внутренней, так и повышению внешней валидности экспериментов. Другими словами, контроль посредством экспериментальных схем охватывает и управление НП и учет всех «третьих» переменных (кроме НП и ЗП) как оснований предпочтений тех или иных планов.
Гипотезы с одним отношением, т.е. формулирующие каузальную зависимость между одной НП и показателем ЗП, проверяются при использовании так называемых истинных экспериментальных планов (по Кэмпбеллу), или интраиндивидуальных и межгрупповых схем сравнений (по Готтсданкеру). В любом учебнике по планированию можно обнаружить пробел, который следовало бы заполнить характеристиками нормативов содержательного планирования. Нет рецептов для формулирования «правильных» гипотез (знание литературы и проницательность исследователя не означают здесь обязательного успеха), но есть возможность оценить степень учета исследователем тех азов, без которых гипотеза не может считаться достаточно обоснованной и имеющей вид собственно экспериментальной.
Тонкости разработки кросс-индивидуальных схем и так называемых «блоков» связаны с желанием проконтролировать влияние таких составляющих экспериментальной ситуации, как вид экспериментальной деятельности или фактор задачи, порядок предъявления разных уровней НП, неодновременность попадания данных в ту или иную группу результатов, возможность возникновения факторов «фона» и т.д.
Контроль типа переменных
Определение типа переменных с точки зрения соответствия их реальным условиям, рассматриваемым теоретическим конструктам или мысленно моделируемым схемам взаимосвязей между переменными позволяет исследователю прогнозировать возможности обобщений как выводов об экспериментальной зависимости за пределами экспериментальной ситуации. Цель любого психологического эксперимента – обобщение за его пределами. Перенос рассматриваемой зависимости на другие условия, другие виды деятельности человека, другие ситуации, другие виды переменных означает определенные требования к внешней валидности эксперимента. Обобщение на другие группы испытуемых связано с контролем того обстоятельства, насколько хорошо представленные в эксперименте выборки испытуемых репрезентируют, или представляют, те более широкие группы людей либо те популяции (группы людей, отвечающие определенному критерию их сходства), на которые осуществляется перенос зависимости. Способ отбора испытуемых в группы или из популяции определяет допустимые границы обобщений. Применительно к межгрупповым экспериментальным схемам следует учитывать связь внешней и внутренней валидности исследования именно благодаря возможностям использованных схем отбора или подбора испытуемых в группы.
Обобщение на те уровни НП, которые реально не использовались в эксперименте, также может иметь отношение к оценке его внешней валидности. Так, обобщение на другие популяции можно представить как обобщение на другие уровни НП, если критерий отличия групп лежал в основе межгрупповых сравнений. Более тесно проблемы переноса закономерностей на другие ситуации, популяции или виды деятельности связан, как отмечалось, с учетом уровней дополнительных переменных.
В зависимости от статуса тех или иных переменных по отношению к экспериментальной гипотезе и возможностей управления ими экспериментатором могут быть использованы такие формы контроля, как стабилизация переменных или их максимальное варьирование. Дополнительные переменные, содержательно входящие в формулировку психологической гипотезы как условия проявления каузальной связи между НП и ЗП, обычно поддерживаются на заданном идентичном уровне или начинают выступать в качестве второго фактора (кроме НП), учет изменений которого необходим для заключения о каузальности вывода. Так возникают факторные планы для проверки гипотез с одним отношением (т.е. между одной НП и ЗП).