Инструментальные условные рефлексы

6. Инструментальные условные рефлексы

Параллельно с работами И.П. Павлова, в США развивалось изучение сложных рефлексов, которые носят название инструментальных условных рефлексов. Основателем этого направления был Морган (Morgan, 1900).

Различия инструментальных рефлексов и классических павловских довольно велики.

В классических условных рефлексах условный сигнал — раздражитель — воздействует на органы чувств животных. Животное воспринимает условный сигнал как заменитель безусловного сигнала, что приводит к адекватной реакции. Классические рефлексы формируют связь между стимулом и результатом.

Инструментальный условный рефлекс - условный рефлекс, в котором выполнение определенной (двигательной) реакции в ответ на условный раздражитель является необходимым условием получения подкрепления (выработка по эффекту). Выработка инструментального условного рефлекса происходит при активации центра определенного драйва, вызывающего общую активацию, направленную на прекращение этого драйва. При повышенной активности (методом проб и ошибок) находится адекватная реакция, которая усиливается по закону эффекта.

Итак, классические и инструментальные рефлексы отличаются методикой выработки. Но внутренние процессы, лежащие в основе этих двух типов рефлексов, одинаковы. Выработка УР 1-го рода сопровождается УР 2-го рода. Укрепленной в станке Павлова собаке поднимали переднюю ногу, а затем давали порцию мясного порошка. После нескольких таких проб собака сама поднимала ногу, если ее помещали в станок голодной. С другой стороны, при инструментальном научении условным раздражителем можно считать обратную афферентацию от мускулатуры, которая сигнализирует о предстоящем подкреплении.

При инструментальном научении животное должно совершить некоторые действия или манипуляции с объектами, после чего получит подкрепление. В результате возникает связь между действиями животного и результатом. Иначе говоря, особь должна не просто услышать или увидеть сигнал, а должна что-то нажать, клюнуть или передвинуть. Такие действия носят название инструментального научения.

Б. Скиннер (1937), был одним из первых систематических исследователей поведения животных в строго воспроизводимых лабораторных условиях. Для получения надежных данных о поведении животных он разработал оригинальную технику и методологию эксперимента, которая привела к созданию знаменитых "Скиннеровских камер". В этих камерах животные выполняли единообразные инструментальные операции, которые строго контролировались, управлялись и регистрировались. Проведя огромное количество экспериментов, Б. Скиннер написал книгу "Поведение организмов", где на конкретном материале обсуждаются и описываются такие принципиальные зоопсихологические понятия, как положительное и отрицательное подкрепление, угашение, генерализация раздражителя, дифференцировка стимулов, дифференциация реакций, аутошейпинг и условное подкрепление. В системе Б. Скиннера раздражители классифицируются в связи с операциями, в которых они задействованы, и по их функциональным влияниям. Он создал целое направление в экспериментальной зоопсихологии. Теперь оно носит название "Экспериментального анализа поведения" (3).

7. Оперантное поведение

Б. Скиннер ввел в экспериментальную зоопсихологию методы изучения спонтанного поведения животных. Их суть сводится к тому, что животному позволяется совершать произвольные действия, а оператор, изменяя тактику подкрепления, пытается управлять поведением исследуемой особи. Для обозначения спонтанного поведения животного, которое происходит без очевидного стимула, существует специальное название - оперантное действие. Этот термин был введен Б. Скиннером для подчеркивания различий с так называемым реактивным поведением, которое проявляется в ответ на определенный стимул.

Примером оперантного поведения является обучение клевания "ключа" голубем. Голубя помещают в камеру с кормушкой с встроенной лампочкой и небольшим кружком на уровне головы. Кружок снабжен устройством для включения электрической цепи и носит название "ключа". Первоначально голубя приучают к сочетанию свет-корм. Когда загорается свет, то выдается пища. Голуби быстро привыкают к этому и запоминают последовательность событий. Затем оператор начинает подводить голубя к клеванию ключа. Для этого корм начинают давать только тогда, когда голубь подходит к ключу. Затем только после вытягивания шеи на уровень ключа. В конце концов возникает момент, когда голубь клюет ключ. После этого пища выдается исключительно за клеванием ключа. Поскольку ключ соединен с электрической цепью кормушки, то далее обучение происходит без участия оператора.

При таком подходе решающее значение имеет форма подачи подкрепления. В основном, Б. Скиннер заимствовал методы работы с подкреплением И.П. Павлова, хотя и модифицировал их формы. Например, награждением по постоянному соотношению называется подкрепление голубя при каждом третьем клевании ключа. Вариаций форм подкрепления Б. Скиннер ввел очень много, что позволило ему добиться выработки очень сложного оперантного поведения. Он считал, что у его методики подачи подкрепления вообще нет пределов влияния на поведение животных, а их оперантным действиям можно придавать любую форму. Впоследствии это не подтвердилось. Многих животных не удается научить даже простым действиям, поскольку оперантная задача вступает в конфликт с инстинктивным поведением (3).