Несмотря на то, что вначале Павлов проводил эксперименты на животных, другие исследователи начали изучать основные процессы классического обусловливания на людях. Эксперимент, который провели Уотсон и Рейнер (1920) иллюстрирует ключевую роль классического обусловливания в формировании таких эмоциональных реакций, как страх и тревога.
Эти ученые обусловливали эмоциональную реакцию страха у 11-месячного мальчика, известного в анналах психологии под именем «Маленький Альберт». Как и многие дети, Альберт вначале не боялся живых белых крыс. К тому же его никогда не видели в состоянии страха или гнева. Методика эксперимента состояла в следующем; Альберту показывали прирученную белую крысу (УС) и одновременно за его спиной раздавался громкий удар в гонг (БС). После того, как крыса и звуковой сигнал были представлены семь раз, реакция сильного страха (УР) плач и запрокидывание — наступала, когда ему только показывали животное. Через пять дней Уотсон и Рейнер показали Альберту другие предметы, напоминающие крысу тем, что они были белые и пушистые. Было обнаружено, что реакция страха у Альберта распространилась на множество стимулов, включая кролика, пальто из котикового меха, маску Деда Мороза и даже волосы экспериментатора. Большинство из этих обусловленных страхов все еще можно было наблюдать месяц спустя после первоначального обусловливания. К сожалению, Альберта выписали из больницы (где проводилось исследование) до того, как Уотсон и Рейнер смогли угасить у ребенка страхи, которые они обусловили. О «Маленьком Альберте» больше никогда не слышали. Позже многие резко критиковали авторов за то, что они не убедились в отсутствии у Альберта стойких болезненных последствий эксперимента.
Хотя ретроспективно этот случай можно назвать жестоким, он действительно поясняет, как подобные страхи (боязнь незнакомых людей, зубных врачей и докторов) можно приобрести в процессе классического обусловливания.
Респондентное поведение — это скиннеровская версия павловского, или классического обусловливания. Он также называл его обусловливанием типа С, чтобы подчеркнуть важность стимула, который появляется до реакции и выявляет ее. Однако Скиннер полагал, что в целом поведение животных и человека нельзя объяснять в терминах классического обусловливания. Напротив, он делал акцент на поведении, не связанном с какими-либо известными стимулами.
Пример для иллюстрации: рассматривая поведение, вы непосредственно сейчас занимаетесь чтением. Определенно, это не рефлекс, и стимул, управляющий этим процессом (экзамены и оценки), не предшествует ему. Наоборот, в основном на ваше поведение чтения воздействуют стимульные события, которые наступят после него, а именно — его последствия. Так как этот тип поведения предполагает, что организм активно воздействует на окружение с целью изменить события каким-то образом, Скиннер определил его как оперантное поведение. Он также называл его обусловливание типа Р, чтобы подчеркнуть воздействие реакции на будущее поведение: R --- S.
Оперантное поведение, т.е. вызванное оперантным научением, определяется событиями, которые следуют за реакцией. За поведением идет следствие, и природа этого следствия изменяет тенденцию организма повторять данное поведение в будущем. Например, катание на роликовой доске, игра на фортепиано, метание дротиков и написание собственного имени — это образцы оперантной реакции, или операнты, контролируемые результатами, следующими за соответствующим поведением. Это произвольные приобретенные реакции у которых есть стимул, но он не поддаётся распознаванию. Скиннер понимал, что бессмысленно рассуждать о происхождении оперантного поведения, так как нам неизвестны стимул или внутренняя причина, ответственная за его появление. Оно происходит спонтанно.
Если последствия благоприятны для организма, тогда вероятность повторения операнта в будущем усиливается. Когда это происходит, говорят, что последствия подкрепляются, и оперантные реакции, полученные в результате подкрепления (в смысле высокой вероятности его появления) обусловились. Сила позитивного подкрепляющего стимула т. о. определяется в соответствии с его воздействием на последующую частоту реакций, которые непосредственно предшествовали ему.
И напротив, если последствия реакции не благоприятны и не подкреплены, тогда вероятность получить оперант уменьшается. Например, вы скоро перестанете улыбаться человеку, который в ответ на вашу улыбку всегда бросает на вас сердитый взгляд или вообще никогда не улыбается. Скиннер полагал, что, следовательно, оперантное поведение контролируется негативными последствиями.
По определению, негативные, или аверсивные последствия ослабляют поведение, порождающее их, и усиливают поведение, устраняющее их. Если человек постоянно угрюм, вы, вероятно, попытаетесь совсем, избегать его.
Для того, чтобы изучать оперантное поведение в лаборатории, Скиннер придумал на первый взгляд простую процедуру, названную свободным оперантным методом.
Полуголодную крысу поместили в пустую «свободно-оперантную камеру» (известную как «ящик Скиннера»), где был только рычаг и миска для еды. Сначала крыса демонстрировала множество оперантов: ходила, принюхивалась, почесывалась, чистила себя и мочилась. Такие реакции не вызывались никаким узнаваемым стимулом; они были спонтанны. В конце концов, крыса, в ходе своей ознакомительной деятельности нажимала на рычаг, тем самым получая шарик пищи, автоматически доставляемый в миску под рычагом. Т. к. реакция нажатия рычага первоначально имела низкую вероятность возникновения, ее следует считать чисто случайной по отношению к питанию; то есть мы не можем предсказать, когда крыса будет нажимать на рычаг, и не можем заставить ее делать это. Однако, лишая ее пищи, скажем, на 24 часа, мы можем убедиться, что реакция нажима рычага приобретет, в конце концов, высокую вероятность в такой особой ситуации. Это делается при помощи метода, называющегося научение через кормушку, посредством которого экспериментатор дает шарики пищи каждый раз, когда крыса нажимает на рычаг. Потом можно увидеть, что крыса проводит все больше времени рядом с рычагом и миской для пищи, а через соответствующий промежуток времени она начнет нажимать рычаг все быстрее и быстрее. Таким образом, нажатие рычага постепенно становится наиболее частой реакцией крысы на условие пищевой депривации. В ситуации оперантного научения поведение крысы является инструментальным, то есть оно действует на окружающую среду, порождая подкрепление (пищу). Если далее идут неподкрепляемые опыты, то есть если пища не появляется постоянно вслед за реакцией нажатия рычага, крыса, в конце концов, перестанет нажимать его, и произойдет экспериментальное угасание.
Теперь, когда мы познакомились с природой оперантного научения, будет полезно рассмотреть пример ситуации, встречающейся почти в каждой семье, где есть маленькие дети, а именно — оперантное научение поведению плача. Как только маленькие дети испытывают боль, они плачут, и немедленная реакция родителей — выразить внимание и дать другие позитивные подкрепления. Так как внимание является подкрепляющим фактором для ребенка, реакция плача становится естественно обусловленной. Однако плач может возникать и тогда, когда боли нет. Хотя большинство родителей утверждают, что они могут различать плач от расстройства и плач, вызванный желанием внимания, все же многие родители упорно подкрепляют последний.
Могут ли родители устранить обусловленное поведение плача или ребенку «судьба быть плаксой» на всю жизнь? Уильямс (1959) сообщает о случае, который показывает, как обусловленный плач был подавлен у 21-месячного ребенка. Из-за серьезного заболевания в течение первых 18 месяцев жизни ребенок получал повышенное внимание от своих обеспокоенных родителей. Фактически, из-за его крика и плача, когда он ложился спать, кто-то из родителей или тетя, жившая вместе с этой семьей, оставались в его спальне до тех пор, пока он не засыпал. Такое ночное бодрствование обычно занимало два-три часа. Оставаясь в комнате, пока он не засыпал, родители, несомненно, давали позитивное подкрепление поведению плача у ребенка. Т.о. он прекрасно контролировал своих родителей. Чтобы подавить это неприятное поведение, врачи велели родителям оставлять ребенка засыпать одного и не обращать никакого внимания, на плач. Через семь ночей поведение плача фактически прекратилось. Кдесятой ночи ребенок даже улыбался, когда его родители уходили из комнаты, и можно было слышать его довольный лепет, когда он засыпал. Через неделю, однако, ребенок сразу начал кричать, когда тетя уложила его в постель и вышла из комнаты. Она возвратилась и осталась там, пока ребенок не заснул. Этого одного примера позитивного подкрепления было достаточно, чтобы стало необходимым во второй раз пройти через весь процесс угасания. Кдевятой ночи плач ребенка, наконец, прекратился, и Уильямс сообщил об отсутствии рецидивов в течение двух лет.
Суть оперантного научения состоит в том, что подкрепленное поведение стремится повториться, а поведение неподкрепленное или наказуемое имеет тенденцию не повторяться или подавляться. Следовательно, концепция подкрепления играет ключевую роль в теории Скиннера.
Скорость, с которой оперантное поведение приобретается и сохраняется, зависит от режима применяемого подкрепления. Режим подкрепления — правило, устанавливающее вероятность, с которой подкрепление будет происходить. Самым простым правилом является предъявление подкрепления каждый раз, когда субъект дает желаемую реакцию. Это называется режимом непрерывного подкрепления и обычно используется на начальном этапе любого оперантного научения, когда организм учится производить правильную реакцию. В большинстве ситуаций повседневной жизни, однако, это либо неосуществимо, либо неэкономично для сохранения желаемой реакции, так как подкрепление поведения бывает не всегда одинаковым и регулярным. В большинстве случаев социальное поведение человека подкрепляется только иногда. Ребенок плачет неоднократно, прежде чем добьется внимания матери. Ученый много раз ошибается, прежде чем приходит к правильному решению трудной проблемы. В этих примерах неподкрепленные реакции встречаются до тех пор, пока одна из них не будет подкреплена.