Б. Повторение с использованием разных методов
В исследованиях артефактов всегда повторяется одна и та же история: весьма обнадеживающий первоначальный эксперимент, построенный по схеме «использование одного воздействия и одного замера», подвергается затем критике с точки зрения конкретных правдоподобных конкурентных гипотез и сопровождается рядом других экспериментов, предполагающих использование либо контрольных групп, подвергаемых дополнительному воздействию, либо измененного метода воздействия, либо измененного метода измерения, пока, наконец, первоначальные данные не получат двойного подтверждения или не будут отвергнуты в пользу какой-нибудь конкурентной интерпретации. Даже там, где поле исследования доступно, а само исследование обходится недорого, этот цикл занимает добрый десяток лет, в чем можно убедиться на примере работы Розенберга [83] с экспериментальным исследованием диссонанса. Поэтому можно лишь приветствовать любую стратегию, которая могла бы сократить эту расточительную процедуру.
Познакомившись с описанием средств контроля, представленным в предыдущем разделе о типах артефактов, нетрудно подметить их обобщенный характер и применимость к разнообразным экспериментальным процедурам. Многочисленные методы измерения имеют аналогичное значение. Это наводит на мысль взять за правило программирование гетерометодического повторения
уже на начальной фазе исследования. Так, от всякого диссертационного исследования требовалось бы вводить экспериментальную переменную двумя методически независимыми способами и в каждом случае измерять эффект воздействия двумя независимыми методами. Если какой-нибудь гипотетический закон был первоначально подтвержден в каждом из четырех произведенных таким образом гетерометодических повторений, большая часть потенциально правдоподобных конкурентных гипотез будет сразу же исключена (еще до того, как они будут сформулированы в явном виде). Если все четыре повторения не дали согласованных между собой результатов, а наблюдался ряд значительных эффектов, то соискатель столкнется с интригующей эмпирической загадкой, над которой стоит поразмыслить, но у него не будет искушения высказывать сверхкатегорические теоретические утверждения, что могло бы иметь место, если бы его взору открылась какая-то одна часть этой загадки. Однако выполнять это методическое предписание не рекомендуется. Если я правильно оцениваю наши сегодняшние теоретические успехи и экспериментальные умения, полного подтверждения все равно почти никогда нельзя получить. Описанный процесс в целом был бы более обескураживающим, чем принятая ныне практика, притом настолько, что у многих вовсе пропала бы охота проводить исследования. При нынешних стандартах, не поощряющих публикацию негативных результатов, не подтверждающих новые гипотезы, редакторы журналов почти наверняка отказались бы опубликовать честный отчет, и были бы, вероятно, правы, если смотреть на дело с точки зрения оптимальной коллективной переработки информации (Campbell [20, с. 168—170]). Науке как социальной системе требуется мотивация, достаточная для того, чтобы продуцировать научные исследования в избыточном количестве. Эта мотивация гораздо выше, когда каждый исследователь считает, что он пользуется оптимальным методом, а когда его ожидания подтвердились, верит, что доказал истинную теорию. Какая-то степень сверхоптимизма, возможно, необходима как при предвосхищении еще не сделанного, так и при ретроспективном взгляде на выполненное исследование. Так же обстоит дело и с проблемой артефактов вообще: с точки зрения мотива-
ции самое лучшее, по-видимому, не думать о них заранее как о неотвратимом закономерном аспекте любого исследования, а, напротив, закрыть глаза на их возможность и рассматривать всякого рода возмущение, коль скоро оно возникло, как специфическую аномалию в целеустремленном во всех других отношениях научном поиске.
Если избранное нами поприще и в самом деле чрезвычайно трудно, то систематическое появление на свет поражающих воображение результатов, в которых позднее станут подозревать артефакты, в мотивационном плане даже полезно. Они служат подкреплениями, которые побуждают потенциальных первооткрывателей и знающих свое дело критиков (чем поразительнее результат, тем выше репутация беспочвенных заявлений). Это подкрепления и мотивация, побуждающие к экспериментальной работе и эмпирическим исследованиям. И то и другое было бы утрачено, если обратиться к процедуре, успешно страхующей от чрезмерно оптимистических псевдоподтверждений будоражащих умы теорий.