Последовательные переделки сигнального значения дифференцировочных стимулов

Переделка сигнального значения условных раздражителей (ее часто называют переделкой дифференцировки) — это разновидность дифференцированного обучения.

После достижения определенного, выбранного экспериментатором критерия выработки различения (например, 80 % правильных решений) условия получения подкрепления меняются на противоположные: теперь реакция на стимул, ранее подкреплявшийся, перестает сопровождаться пищей, а реакцию на стимул, на который животное только что научилось не реагировать, начинают подкреплять.

Американский исследователь М. Биттерман (1973) предложил проводить такие переделки многократно. Эта процедура получила название метода последовательных(или обратимых) переделок (discriminationreversallearning). Автор исходил из того, что после многократных смен сигнального значения стимулов у животных может сформироваться единая стратегия (или правило), и они не будут каждый раз обучаться совершенно заново.

Опыты проводились на разных видах позвоночных. При каждой следующей переделке число ошибок снижалось, и в конце концов наступал момент, когда при очередной смене сигнального значения стимулов животное уже со второй пробы начинало выбирать «правильно» без дополнительного обучения. ^в Снижение числа проб, необходимого для очередной переделки реакции, происходит тем быстрее, чем выше уровень эволюционного развития данного животного.

3.3.2. формирование «установки на обучение»

Метод формирования «установки на обучение» (objectlearning-setformation) разработал американский исследователь Г. Харлоу (Harlow, 1949; 1958). Согласно классическому варианту этой методики, животное (в опытах Харлоу макака-резуса) обучают простой дифференцировке — выбору одного из двух стимулов: игрушек или мелких предметов обихода. По достижении определенного критерия выработки дифференцировки начинают следующую серию: животному предлагают два новых стимула, ничем не похожих на первые. По завершении второй стадии обучения формируют третью дифференцировку и т. д. После выработки 100–150 таких реакций (их число зависит от уровня организации данного вида и может доходить до 1500 у крыс и голубей, занимая многие месяцы) животное уже при втором предъявлении новой пары стимулов действует не наугад, не методом проб и ошибок, а в соответствии с усвоенным им ранее правилом, которое принято называть установкой.Оно запоминает результат первой пробы и далее реагирует в соответствии с этой «установкой».

Правило состоит в том, чтобы «выбирать тот же предмет, что и в первой пробе, если его выбор сопровождался подкреплением, или другой, если подкрепление получено не было (в дальнейшем эта стратегия получила название "win-stay, Jose-shift"}-».

Принято считать, что при обучении с использованием метода последовательных переделок и при формировании установки происходят сходные процессы, так что первый можно считать частным случаем формирования установки.

Впоследствии было создано несколько модификаций исходной методики. Например, Д. Уоррен (Warren, 1977) в своих опытах не вырабатывал каждую дифференцировку до достижения критерия обученности, а предъявлял каждую пару определенное число раз и затем предлагал следующую. Именно этот вариант был использован рядом авторов для сравнения обучаемости разных видов приматов (Passingham, 1982; Rumbaugh et al., 1987, 2000).

Методом формирования установки на обучение впервые была получена широкая сравнительная характеристика обучаемости животных разных систематических групп, которая в определенной степени коррелировала с показателями организации мозга. Вместе с тем, как и данные М. Биттермана, эти результаты свидетельствовали о существовании у животных каких-то процессов, выходящих за рамки простого образования дифференцировочных УР. Считают, что в ходе такой процедуры животное «учится учиться». Оно освобождается от связи «стимул-реакция» и «переходит от ассоциативного обучения к инсайт-подобному обучению с одной пробы» (Harlow, 1958). При этом, по мнению Р. Бирна (Вугпе, 1998), у животного должна сформироваться характеристика подкрепляемого стимула в какой-то отвлеченной форме, т. е. должно сформироваться абстрактное правило. Человек выразил бы это правило, как «выбирай подкрепляемое» вместо того, чтобы запоминать каждый раз целый список стимулов (например, красный мяч «+», блюдце «—»; штопор «+», свисток «—» и т. д.).

Аналогичной точки зрения придерживается Л. А. Фирсов. Он считает, что этот вид обучения по своей сути и по лежащим в его основе механизмам близок к процессу обобщения (подробнее см. гл. 5), и с какого-то момента «первичное» обучение — выработка конкретной дифференцировки — сопровождается «вторичным» обучением — некими когнитивными процессами, при которых выявляется общее правилорешения многих однотипных задач.

То же мнение разделяет английский специалист по теории обучения Н. Макинтош (Mackintosh, 2000): в основе формирования установки на обучение лежит переход от простых ассоциативных механизмов (образования УР и дифференцировок) к когнитивным, т. е. к процессам, основанным на формировании представлений об общем правиле решения серии однотипных задач. По его образному выражению, животные «переходят от заучивания наизусть к заучиванию по смыслу».

Данные, полученные с помощью метода последовательных переделок и метода формирования «установки», впервые создали основу для широкой сравнительной характеристики обучаемости животных и показали, что в процессе такого обучения наряду с ассоциативными участвуют механизмы другого уровня — когнитивные (см. 8.1 и 3.4).

3.3.3. формирование «систем» дифференцировочных условных рефлексов

В работах Л. Г. Воронина (1984) также было показано, что при комбинации отдельных УР возникают новые свойства, не сводимые к свойствам суммы исходных рефлексов. Происходит образование так называемых систем дифференцировочных УР, или просто «систем». Такие системы Л. Г. Воронин считал целостными функциональными единицами, из которых складывается психическая деятельность.

У животного вырабатывают несколько дифференцировочных УР, объединенных в систему таким образом, что выполнение одного УР зависит от усвоения другого.

Одна из таких процедур составляет необходимый этап в изучении способности к транзитивному заключению— форме дедуктивного мышления, свойственной и животным, и человеку.

Программа эксперимента по выработке систем дифференцировок состоит в следующем. Животное учится дифференцировать несколько пар раздражителей (как правило, цветовых стимулов). При выработке дифференцировки каждой следующей пары стимулов производится смена сигнального значения части из них в соответствии с определенным правилом: стимул, бывший положительным в паре А — В + (где «В +» — подкрепляемый стимул, а «А —» — неподкрепляемый), становится отрицательным в паре В — С +. В процессе обучения животное должно усвоить информацию о том, что значения стимулов В , С , D могут быть как положительными (В +, С +, D +), так и отрицательными (В —, С —, D —), в зависимости от пары, в которой они в данный момент предъявляются. Стимулы А - и F +, т. е. первый и последний в последовательности, остаются во всех комбинациях только положительным (F) или только отрицательным (А). Высокая доля правильных выборов при чередовании всех пар стимулов, когда животное выбирает, например, стимул С в паре В — С+, но не реагирует на него в паре С — D+,свидетельствует, что оно усвоило принцип данной системы. Такую систему дифференцировок успешно усваивают дети, начиная с 4 лет (Bryant, Trabasso, 1971), взрослые шимпанзе (Gillan, 1981; Boysen, Berntson, 1995), а также голуби и вороны (Зорина и др., 1989). Межвидовые различия в динамике и успешности формирования такой системы дифференцировок у этих видов птиц оказались незначительными и недостоверными. В то же время при обратимых последовательных переделках и формировании установки на обучение голуби существенно отставали как от врановых, так и от приматов.

Метод выработки дифференцировочных УР в разных его комбинациях является одним из ведущих в физиологии ВНД и используется как инструмент для исследования целого ряда проблем.

К этим проблемам, помимо оценки возможностей органов чувств животных разных видов, относится изучение следующих более сложных когнитивных способностей:

* к обобщению;

* к транзитивному заключению;

* к формированию установки на обучение.

Такие экспериментальные исследования будут подробнее рассмотрены ниже.