» Оперантная теория Скиннера

Теория оперантного обусловливания Берреса Ф. Скиннера (1904-1990)

Вторым после К. Халла ведущим необихевиористом считается Беррес Фредерик Скиннер (Burrhus Frederic Skinner), но по популярности он значительно его превышает. До самой своей смерти он оставался одним из самых известных психологов мира, его идеи и сегодня влияют на характер психологических исследований, на педагогику и практику психологии. Историки науки задают вопрос: сделал ли Скиннер существенный вклад в человеческое самопознание? И в основном отвечают так: «Он был слишком далек от такого рода вопросов».

Понимание человеком самого себя, или по крайней мере того, что искали философы и психологи на протяжении многих веков, никак не было целью Скиннера. Всю свою долгую жизнь он придерживался крайней бихевиористской позиции, согласно которой «субъективные сущности», такие как ум, мышление, память, аргументация, не существуют вовсе, а есть только «вербальными конструктами», грамматическими ловушками, в которые человечество попало с развитием речи. Скиннер отыскивал детерминанты поведения: каким образом оно обуславливается внешними причинами. Он не сомневался в правильности своей позиции, поскольку считал, что «бихевиоризм нуждается в объяснении».

Теория обусловливания, которую стремился создать Скиннер, должна была подытожить его достаточно необычные исследования: все, что мы делаем и чем мы являемся, детерминировано историей нашей наград и наказаний. Детали его теории исходили из таких принципов, как частичное подкрепление эффекта, изучение обстановки, вызывающей определенное поведение или прекращающей его.

Подобно Дж. Уотсону , Скиннер был общественно активным, в частности как публицист. В одном из своих ранних выступлений по телевидению он привел дилемму, которую предложил еще М Монтень: «Что сделали бы вы, если бы вам надо было выбрать: родить детей или создать книги?» - и ответил, что для себя лично он родил бы детей, однако его вклад в будущее был бы значительным благодаря его трудам.

Скиннер любил смеяться над терминами, которыми специалисты пользовались для понимания человеческого поведения: «Поведение свойственно человеческой природе, и потому должна быть экстенсивная «психология индивидуальных различий», в которой люди сравниваются между собой и описываются в терминах черт характера, способностей, наклонностей. Но за традицией каждый, кто имеет дело с человеческими поступками, продолжает толковать человеческое поведение донаучным способом».

Скиннер также отвергал попытки понять внутреннюю сторону характера личности: «Мы не имели потребности говорить о том, что личности, состояния ума, чувств, черты характера человека реально существуют, чтобы можно было их примирить с научным анализом поведения... Мышление и все другое является поведением. Ошибка заключается в попытках отнести поведение к душе».

По мнению Скиннера, необходимо знать внешние причины поведения и его результаты, которые можно наблюдать. Только исходя из таких предположений можно дать ясную картину активности организма как поведенческой системы.

Согласно этой позиции он выступал как убежденный детерминист: «Мы такие, какие предстаем в нашей истории. Мы хотим думать, что мы выбираем, что мы действуем, но я не могу согласиться с тем, что личность является или свободной, или ответственной». Самодостаточное и автономное человеческое бытие Скиннер считает иллюзией. Для него хороший человек является таковым, потому что полностью обусловлен вести себя определенным образом, а хорошее общество должно быть основано на «бихевиоральной технике», что означает научный контроль за поведением с использованием методов положительного подкрепления.

Современники Скиннера считали его ловким популяризатором науки: он был красноречив, уверенно эгоистичен, умел захватить внимание. Для демонстрации преимуществ техники обусловливания он учил голубя играть мелодию на игрушечном пианино, а пару голубей - в настольный теннис, когда они перекатывали мяч своими клювиками. Миллионы зрителей смотрели это по телевидению как научно-документальный фильм.

Два голубя играют в пинг-понг во время эксперимента по оперантному обучению. Кембридж, Массачусетс, июнь 1950 года.

Скиннер переносил свои натуралистические видения на придуманное им общество. В утопической новелле «Walden Two» (1948) он описывает небольшое сообщество, в котором поведение детей с самого рождения было строго обусловлено наградами (положительное подкрепление), чтобы они стали на путь сотрудничества и социабельности, все поведение научно контролируется ради всеобщего блага. Несмотря на искусственность диалогов и несколько избитый сюжет, эта книга стала любимой среди студентов. Она была быстро продана тиражом более двух миллионов экземпляров.

Популярность Скиннера у публики была намного больше, чем среди коллег-профессионалов. Журнал «Американский психолог» писал: «Скиннер является ведущей фигурой в бихевиористском мифе. Он ученый-герой, Прометей, несущий огонь открытия, мастер-технологист, главный мятежник, который освобождает наши мысли от старых взглядов».

Скиннер родился в маленьком городке в Пенсильвании, его отец был юристом. Мальчиком он увлекался изобретениями, позже, уже как психолог, он создавал оригинальную и эффективную аппаратуру для экспериментов с животными. В школе и колледже Скиннер мечтал стать писателем, а после колледжа пробовал писать. Хотя он вплотную наблюдал различные формы человеческого поведения вокруг себя, он однажды четко понял, что не может ничего сказать о том, что видел и переживал, и в глубокой печали отказался от такого рода усилий.

Но вскоре Скиннер нашел другой, более практичный для себя путь понимания человеческого поведения. Знакомясь с трудами Уотсона и Павлова, он осознал, что его будущее лежит в научном раскрытии человеческого поведения, в частности в изучении реакций обусловливания. Я был очень расстроен моим неудачами в литературе, - говорил он в 1977 г. - я был убежден, что писатель ничего на самом деле не понимает. И это повлекло то, что я вернулся в психологию».

Хотя в Гарварде тогда царила интроспективная психология, Скиннер не интересовался «внутренней историей» человека и пошел своей дорогой, проводя бихевиористские исследования с крысами. В автобиографии он откровенно говорит о том, что вопреки профессорскому обучению он становился все более бихевиористом, а на защите диссертации резко отверг критику бихевиоризма.

Опираясь на свои изобретательские способности, он сконструировал «проблемную клетку» , что было значительным достижением после известной торндайковской модели. Она была довольно просторная для белых крыс, а на стене находился бар с едой и питьем. Когда крыса, прогуливаясь по клетке, случайно упиралась передними лапами в бар, нажимая на него, еда в форме шарика попадала на поднос.

Это позволило получить более объективные данные о поведении, чем это было до скиннеровских опытов. Именно крыса «определяла», какое количество времени проходит между нажатиями на бар. Поэтому за свое открытием принципа обучения Скиннер мог благодарить так называемый «ответ крысы» - класс достижений, когда поведение животного меняется в ответ на подкрепление без вмешательства экспериментатора.

Скиннер построил исследовательскую программу с клеткой таким образом, что приближал ее условия к реальным ситуациям, где поведение подкрепляется либо не подкрепляется. Он, в частности, исследует обучение ответам, если они регулярно подкрепляются или подкрепления внезапно прерываются, а также влияние на обучение временных интервалов с их регулярностью и иррегулярностью.

На этой основе Скиннер сформулировал ряд принципов, которые проливают свет не только на поведение крыс, но и на человеческое бытие. Речь идет, в частности, о его открытии важных вариаций эффекта парциального, частичного подкрепления. Скиннер находит аналогию в поведении игроков с игровым автоматом в казино: ни крыса, ни игроки не могут предсказать, когда появится следующее подкрепление, но в них есть надежда, что оно появится при каждой новой попытке.

Важным вкладом Скиннера в науки о поведении является его концепция оперантного научения. Одним этим он уже заслуживает, по мнению американских историков психологии, видное место в кругу знаменитых психологов мира.

В классическом Павловском обусловливании безусловный ответ животного (слюноотделение) на еду превращается в условный ответ по отношению к предыдущему нейтральному стимулу (звуки метронома или звонка: решающим элементом в поведенческом изменении является новый стимул.

В торндайковском «инструментальном» обусловливании решающим элементом поведенческого изменения является ответ, а не стимул. Нейтральный ответ - случайный шаг (нажатие) на педаль во время случайных усилий получить еду - является подкрепляющим научающим шагом поведения, что приводит к изменению, которому ранее животное не было обучено.

Скиннеровское оперантное обусловливание является важным развитием инструментального. Случайное движение, которое осуществляет животное, в любом случае может быть понято как оперантное для окружающих и поэтому является, по Скиннеру, именно оперантным. Подкрепительное движение приводит к оперантному научению. При подкреплении серии небольших случайных движений экспериментатор может «создавать» поведение животного, пока оно действует такими способами, которые не были частью его оригинального природного репертуара.

Беррес Ф. Скиннер

Данный подход дал возможность Скиннеру «создать» поведение голубя - заставить того клевать большой цветной пластиковый диск, прикрепленный на стенке «скиннеровской» клетки. Он об этом пишет так: «Мы сначала дали птице пищу, когда она медленно повернулась в направлении диска. Это и обусловило частотность такого поведения. Мы поддерживали подкрепление, пока незначительное движение не было направлено к пятну (диску). Это опять меняло общее распределение поведения без выработки нового единства. Мы продолжали с помощью подкрепления позиции успешный подход к пятну, далее подкрепление было только в случае, когда голова двигалась медленно вперед, и, наконец, только тогда, когда клюв действительно имел контакт с пятном.

Таким образом, мы можем построить оперантное поведение, которое никогда не появилась бы в репертуаре организма иным образом. При подкреплении серии успешных приближений мы получаем ответ за короткое время. Возникает функционально связанное единство поведения; оно конструируется продолжающимся процессом дифференциального подкрепления в сторону от недифференциального поведения».

Скиннер уподобил оперантные тренировки голубя детскому обучению разговаривать, петь, танцевать, играть, а со временем и всему репертуару человеческого поведения, созданному из мелких звеньев простых поведенческих актов. Это можно было бы назвать «an Erector-set» (взглядом от человеческого бытия), бездумным роботом, собранным оперантным обусловливанием из многих бессмысленных кусков.

Скиннера так или иначе долго не признавали ведущие психологические учреждения, но постепенно у него появлялись сторонники, что впоследствии выразилось в издании четырех журналов скиннеровских бихевиористских работ, а также в создании специальной секции скиннеровских исследований.

Скиннеровская техника оперантного обусловливания широко использовалась в экспериментальной психологии. В последние годы его труды цитировались в сотнях научных публикаций ежегодно (что-то около седьмой части от частоты упоминаний Фрейда). Кроме того, Скиннер имел большое влияние вне главных направлений психологии.

Дэрби, 13-месячная дочь профессора Б.Ф. Скиннера, с момента рождения жила в пыленепроницаемом, закрытом и застекленном детском манеже, в котором температура и влажность регулировались автоматически. Скиннер постепенно сокращал время, которое Дэрби проводила в своем ящике, так что в конце концов она станет только спать в нем.

В 1956 г.. Во время визита в школу к своей дочери Скиннеру пришло в голову, что оперантная техника, применяемая для обучения голубя игре на пианино, может стать более эффективной для обучения, чем традиционные методы. Сложные предметы можно расчленить на простые шаги в логической последовательности; студентам могут быть поставлены вопросы, и преподавателю следует сразу ответить, какие их ответы являются правильными. Здесь работают два принципа: 1) знания, о которых рассказывают правильно, должны стать подкрепленным поведением; 2) непосредственное позитивное подкрепление работает лучше, чем разрушительное негативное подкрепление. Результат известен как «программируемая инструкция».

Поскольку педагог не может одновременно применять подкрепление в классе, где много учеников, новые учебники должны быть написаны так, чтобы вопросы и ответы следовали одни за другими. Кроме того, Скиннер предложил учебные машины для оперантного самообучения. Механическая модель со временем была отвергнута, но сегодня применение обучающих инструкций, основанных на компьютере с непосредственным подкреплением, переживает второе рождение.

В течение нескольких лет движение за программированное обучение получило широкое распространение. Принципы оперантного обусловливания были приспособлены для обучения в школах и колледжах США и других стран. Но воспитатели поняли, что «атомистические» методы программируемой инструкции являются только частью того, в чем нуждается человеческое бытие: необходимы также цельные, иерархизированные мыслительные структуры. Более поздние исследования показали, что отложенное подкрепление часто дает лучший результат, чем подкрепление мгновенное. Рассуждения о характере ответа может привести к большему эффекту в обучении, чем быстрое получение ответа. Вместе с тем скиннеровское учение о непосредственном подкреплении было квалифицировано как полезное и содержится во многих учебных планах и школьных учебниках.

Беррес Скиннер также имел определенный успех в раскрытии причин умственных и эмоциональных расстройств. Система небольших подкреплений для небольших изменений в сторону здоровья дает возможность изменить поведение пациента. В конце 40-х годов Скиннер и два его студента осуществили первое экспериментальное испытание того, что стало известно как модификация поведения . Они устроили стационар в психиатрическом госпитале близ Бостона, в котором по соответствующей методике психотические пациенты получали конфеты или сигареты, чтобы оперировать машиной соответствующим образом. Терапевты давали стимулы пациентам для соответствующего поведения, такие как средства произвольного внимания, поддержка в хозяйственных задачах, привилегии избрания компании для обеда, разговор с врачом или возможность смотреть телевизор.

Подкрепление желаемого поведения у таких людей срабатывало часто. Одна депрессивная женщина не хотела есть и боялась умереть от голодания. Но она принимала гостей, смотрела телепередачи, слушала радио, читала книги и журналы, имела цветы в своей комнате. Терапевты перевели ее в комнату, лишенную этого комфорта и направили свет прямо на нее. Если она что-то ела, определенные предметы комфорта временно возвращали в комнату. Постепенно женщина вернула свой вес. Через 18 месяцев она уже вела нормальную жизнь.

Движение «бихевиоральной модификации» распространилось на многие психиатрических больницы и школы. Такую модификацию применяли для решения важных проблем, таких как курение, ожирение, робость, тики, речевые затруднения. Это была специализированная техника бихевиоральной терапии, но основана больше на Павловском обусловливании, чем на скиннеровской модификации.

Burrhus F. Skinner

Известная книга Скиннера - «Walden Two» - не осчастливила американское общество или хотя бы часть его, но она, несомненно, повлияла на социальные представления миллионов его читателей. Некоторые усилия были сделаны, чтобы реализовать утопию по модели «Walden Two» - Тwin Oaks Community в Луизиане, штат Вирджиния, и коммуна, основанная восьмерьми людьми в 1966 году. После нескольких лет выживания эта коммуна выросла до 81 члена. Они пыталис на основе соответствующих знаний вызывать идеальное поведение и создавать модели различных его форм по методам скиннеровского подкрепления.

Скиннер как-то заметил: «Мое влияние на других людей было значительно меньшим, чем на крыс и голубей или на людей как объектов эксперимента». Это, видимо, не следует понимать буквально. То, о чем он думал всерьез, было таким: «Я никогда не сомневался в важности моей работы». И добавлял в характерном для него перверсивном стиле: «Когда эта работа начала привлекать внимание, я остерегался этого эксперимента больше, чем был доволен им. Некоторые упрекают меня, что я боялся или впадал в депрессию от так называемого самолюбия и жажды слава. Я отвергаю любой гонор, который забирал бы у меня время от моей работы или слишком подкреплял ее специфические аспекты.

Историк психологии М. Хант, излагая идеи Скиннера, не идет дальше констатации отдельных фактов и описания характерологических черт самого ученого. Но и это изложение не может не наталкивать на мысль: можно ли провести параллель между намерениями Скиннера построить идеальное коммунистическое сообщество, опираясь на идею оперантного научения, и намерениями марксистов изменить мир, опираясь на «научный коммунизм» как технологию социальной трансформации?

Роменець В.А., Маноха И.П. История психологии XX века. - Киев, Лыбидь, 2003 .

Теория оперантного научения Б.Ф. Скиннера

это может вам помочь Поздней осенью уже чувствуется дыхание морозной зимы, которая принесет не только много радости, зимних забав, но и распираторные заболевания

Теория оперантного научения Б.Ф. Скиннера

В основании теории оперантного обусловливания Скиннера лежит тот простой факт, что не всегда действия живого существа являются реакцией на ту или иную комбинацию внешних воздействий - стимулов. Довольно часто (по мнению Скиннера , в большинстве случаев) поведение выглядит так, как будто бы ему не предшествуют никакие видимые стимулы.

В знаменитых опытах Скиннера лабораторная крыса помещалась в пустой ящик с педалью внутри (так называемый "ящик Скиннера ") и получала полную свободу действий. В процессе хаотичного исследования ящика крыса неизбежно задевала педаль и получала порцию пищи. После нескольких случайных нажатий на педаль у крысы формировалась новая форма поведения, которая не была связана ни с какими предшествующими стимулами. Теперь, проголодавшись, крыса целенаправлено следовала к педали и, нажав на нее - получала желаемое.

Таким образом, ключевое отличие оперантного обусловливания от классического состоит в том, что в случае оперантного обусловливания живой организм своим поведением активно воздействует на окружающую среду и сталкивается с теми или иными последствиями. В случае формирования условного рефлекса такого воздействия не наблюдается. Животные в опытах Павлова были специально, в целях соблюдения чистоты эксперимента, лишены какой-либо возможности влиять на окружение. В этом смысле оперантное поведение активно и направлено на исследование окружающего мира, респондентное поведение реактивно и лишь следует тем или иным воздействиям, в процессе классического обусловливания, приобретшим для организма определенное сигнальное воздействие.

Но сама по себе исследовательская активность ничего не дает - она лишь увеличивает шансы встретить те или иные последствия. То, каким образом видоизменяется поведение, зависит в первую очередь от характера последствий - от того, будут эти последствия приятными или неприятными. Приятные последствия Скиннера называл "подкреплением".

Экспериментируя с разными типами подкрепления, Скиннер вывел одну бесспорную и всегда воспроизводимую закономерность: образцы поведения (операнты), вслед за которыми следуют приятные последствия, в будущем встречаются чаще. Крыса чаще нажимает на педаль, если непосредственно вслед за этим действием она получает кусочек пищи.

Голубь, помещенный в клетку, на полу которой имеется красное пятно, лишь случайным образом может клюнуть в него. Но если сразу вслед за этим он получит пищу - зернышко, то этот оперант (действие в расчете на успех) будет чаще встречаться в будущем. Человек, которого вкусно накормят в одном из ресторанов города, будет чаще ходить в этот ресторан, даже если он довольно далеко расположен от дома. Эту закономерность Скиннер назвал "законом выгоды (приобретения)", иногда его еще называют первым законом оперантного научения .

Закон приобретения означал для Скиннера и его последователей следующее: если перед терапевтом или учителем встает задача сформировать новые привычки, новые образцы поведения, то единственный способ, который дает предсказуемые и надежные результаты, состоит в том, что мы специально создаем позитивные последствия для так называемого "целевого" поведения, т.е. поведения, с которым мы бы хотели чаще встречаться впредь.

Подкрепляя это поведение, мы обязательно добьемся своего: это поведение будет встречаться чаще.

Логичным кажется и другой способ модификации поведения. Многие предполагают, что поведение, которое наказывается, штрафуется, т.е. ведет к последствиям, для индивида неприятным, должно исчезнуть. Этому выводу, однако, Скиннер не нашел подтверждения. С его точки зрения, наказание - довольно спорный способ отучить от нежелательного поведения, поскольку поведение, за которым следуют неприятные последствия, никуда не исчезает, оно лишь видоизменяется самым неожиданным образом. Человек в случае штрафа вынужден искать иные формы поведения, чтобы избежать штрафа. Часто оказывается так, что эти новые формы бывают еще менее желательными, чем те, которые вызвали наказание.

Конечно, человек (или любое другое живое существо) склонен избегать неприятных событий. Это - факт. Однако предсказать, к чему приведут его поиски альтернативных форм поведения - практически невозможно, если только не оказывать ему помощь - не продемонстрировать в явной форме образцы поведения, которые позволят наказания избежать.

И здесь Скиннер еще раз напоминал о том, что предотвращение негативных последствий само вызывает позитивные последствия, т.е. само является подкреплением. И эту форму подкрепления, конечно, можно использовать.

Принципиально в целях изменения поведения можно использовать пять различных типов последствий. Во-первых, это позитивное и негативное подкрепление, которое ведет к укреплению способов поведения, вслед за которыми оно следует. Далее следует позитивное и негативное наказание, ведущее к непредсказуемым последствиям, и игнорирование - то есть абсолютное отсутствие последствий, которое ведет к угасанию поведения и (как мы увидим далее) - к состоянию выученной беспомощности.

URL ресурса: http://www.psychology.ru/romek/behavior/

Скиннер боролся против того, чтобы использовать наказание для контроля над поведением, потому что это вызывает отрицательные эмоциональные и социальные побочные эффекты (страх, тревогу, антисоциальные действия, ложь, потерю самоуважения и уверенности). Кроме того, оно всего лишь на время подавляет нежелательное поведение, которое вновь проявится, если уменьшится вероятность наказания. Вместо аверсивного контроля Скиннер рекомендует позитивное подкрепление как наиболее эффективный метод для устранения нежелательных и поощрения желательных реакций. «Метод успешного приближения или формирования поведения» заключается в положительном подкреплении тех действий, которые наиболее близки к ожидаемому оперантному поведению. К этому приближаются шаг за шагом: одна реакция закрепляется, а затем заменяется другой, более близкой к предпочтительной (так формируют речь, трудовые навыки и т. п.). Данные, полученные при изучении поведения животных, Скиннер перенес на поведение людей, что привело к биологизаторской трактовке. Так, возник скиннеровский вариант программированного обучения. Его принципиальная ограниченность состоит в сведении обучения к набору внешних актов поведения и подкреплению правильных из них. При этом игнорируется внутренняя познавательная деятельность человека, следовательно, нет обучения как сознательного процесса. Вслед за установкой уотсоновского бихевиоризма Скиннер исключает внутренний мир человека, его сознание из поведения и производит бихевиоризацию психики. Мышление, память, мотивы и тому подобные психические процессы он описывает в терминах реакции и подкрепления, а человека - как реактивное существо, подвергающееся воздействиям внешних обстоятельств. Биологизация мира людей, характерная для бихевиоризма в целом, принципиально не проводящего различий между человеком и животным, достигает у Скиннера своих пределов. Культурные явления оказываются в его трактовке «хитроумно придуманными подкреплениями». Для разрешения социальных проблем современного общества Б. Скиннер выдвинул задачу создания технологии поведения, которая призвана осуществлять контроль одних людей над другими. Поскольку намерения, желания, самосознание человека не принимаются во внимание, управление поведением не связано с сознанием. Таким средством выступает контроль за режимом подкреплений, позволяющий манипулировать людьми. Для наибольшей эффективности необходимо учитывать, какое подкрепление наиболее важно, значимо, ценно в данный момент (закон субъективной ценности подкрепления), а затем предоставлять такое субъективно ценное подкрепление в случае правильного поведения человека или угрожать его лишением в случае неправильного поведения. Подобный механизм и позволит управлять поведением. Скиннер сформулировал закон оперантного обусловливания:«поведение живых существ полностью определяется последствиями, к которым оно приводит. В зависимости от того, будут ли эти последствия приятными, безразличными или неприятными, живой организм проявит тенденцию повторять данный поведенческий акт, не придавать ему никакого значения или же избегать его повторения в дальнейшем». Человек способен предвидеть возможные последствия своего поведения и избегать тех действий и ситуаций, которые приведут к негативным для него последствиям. Он субъективно оценивает вероятность их наступления: чем больше возможность негативных последствий, тем сильнее это влияет на поведение человека (закон субъективной оценки вероятности последствий). Эта субъективная оценка может не совпадать с объективной вероятностью последствий, но на поведение влияет именно она. Поэтому один из способов воздействовать на поведение человека - «нагнетание обстановки», «запугивание», «преувеличение вероятности негативных последствий». Если человеку кажется, что последняя, вытекающая из какой-либо его реакции, незначительна, он готов «рискнуть» и прибегнуть к данному действию.

Б. Скиннер (1904-1990) является представителем необихевиоризма.

Основные положения теории ≪оперантного бихевиоризма≫:

1. Предметом исследования является поведение организма в его двигательной составляющей.

2. Поведение - это то, что делает организм и что можно наблюдать, и поэтому сознание и его феномены -воля, творчество, интеллект, эмоции, личность - не могут быть предметом изучения, так как они не наблюдаемы объективно.

3. Человек не свободен, так как сам никогда не управляет своим поведением, которое детерминировано внешней средой.

4. Личность понимается как набор поведенческих шаблонов ≪ситуация - реакция≫, причем последняя зависит от предыдущего опыта и генетической истории.

5. Поведение можно разделить на три вида: безусловно-рефлекторное и условно-рефлекторное, которые являются простым ответом на стимул, и оперантное, возникающее спонтанно и определяемое как обусловливание; этот тип поведения играет решающую роль в адаптации организма к внешним условиям.

6. Главной характеристикой оперантного поведения является его зависимость от прошлого опыта, или последнего стимула, получившего название подкрепления. Поведение усиливается или ослабляется в зависимости от подкрепления, которое может быть отрицательным или положительным.__

7. Процесс положительного или отрицательного подкрепления за совершенное действие называется обусловливанием.

8. На основе подкрепления можно построить всю систему обучения ребенка, так называемое программированное обучение, когда весь материал расчленяется на мелкие части и в случае успешного прохождения и усвоения каждой части учащийся получает положительное подкрепление, а в случае неудачи - отрицательное.

9. На этой же основе строится и система воспитания и управления человеком - социализация происходит путем положительного подкрепления необходимых для общества норм, ценностей и правил поведения, в то время как асоциальное поведение должно иметь негативное подкрепление со стороны общества.

Стремясь переработать классический бихевиоризм, Скиннер исходил прежде всего из необходимости систематического подхода к пониманию человеческого поведения. При этом он считал необходимым исключить из исследования все фикции, к которым прибегают психологи для объяснения того, чего они не понимают. К таким фикциям Скиннер относит многие понятия психологии личности, например самость, автономию, свободу, творчество. С его точки зрения, нельзя говорить о реальной свободе человека, так как он никогда реально сам не управляет своим поведением, которое детерминировано внешней средой При оперантном обучении подкрепляется не стимул, а поведение, операции, которые совершает субъект в данный момент и которые приводят к нужному результату. Большое значение имеет и тот факт, что сложная реакция при этом разбивается на ряд простых, следующих друг за другом и приводящих к нужной цели. Так, при обучении голубя сложной реакции -выходу из клетки при помощи нажатия клювом на рычаг Скиннер подкреплял каждое движение голубя в нужном направлении, добиваясь безошибочного выполнения этой сложной операции. Такой подход к формированию нужной реакции имел большие преимущества по сравнению с традиционным. Прежде всего это поведение было намного устойчивей, оно очень медленно угасало даже при отсутствии подкрепления. Не меньшее значение имеет и тот факт, что обучение при оперантном обусловливании идет быстрее и проще. Это связано с тем, что экспериментатор имеет возможность наблюдать не только за конечным результатом (продуктом), но и за процессом выполнения действия (ведь оно разложено на составляющие, реализуемые в заданной последовательности). Фактически происходит экстериоризация (переход во внешний план) не только исполнения, но и ориентировки и контроля за действием. Ведь подкрепляя правильное действие нужным стимулом, учитель демонстрирует ребенку, на какие элементы ситуации ему надо обращать внимание, а также что и в каком порядке с ними делать. Особенно важно, что такой подход возможен при обучении не только определенным навыкам, но и знаниям. Разработанный Скиннером метод программного обучения позволял оптимизировать учебный процесс, разработать корректирующие программы для неуспевающих и умственно отсталых детей. Эти программы имели огромные преимущества перед традиционными программами обучения, так как давали возможность учителю контролировать и в случае необходимости исправлять процесс решения задачи, мгновенно замечать ошибку учащегося. Кроме того, эффективность и безошибочность выполнения повышали мотивацию учения, активность учащихся. Наблюдение за процессом решения также позволяло индивидуализировать процесс обучения в зависимости от темпа усвоения знания. Однако у этих программ был и существенный недостаток, так как экстериоризация, играющая положительную роль в начале обучения, тормозит развитие свернутых, умственных действий. Постоянная необходимость повторять промежуточные, давно усвоенные учеником этапы решения мешает интериоризации и свертыванию развернутой педагогом схемы решения задачи. Это может на определенном этапе снизить мотивацию учащихся.

Классические условные рефлексы Зорина

Условнорефлекторное слюноотделение, которому уделялось основное внимание в лаборатории Павлова, относится к классическим УР. При выработке классического УР последовательность событий в опыте никак не зависит от поведения животного. Она устанавливается либо экспериментатором, либо специальной программой, в соответствии с которой включаются те или иные стимулы, в ответ на них можно наблюдать образование условных реакций. В настоящее время в связи с использованием разнообразных экспериментальных животных (не только традиционных собак), а также благодаря разнообразным методам регистрации изучаемых реакций на смену павловской методике классических слюнных УР пришли другие, более удобныелабораторные модели, которые продолжают быть предметом многочисленных исследований (см. также Мак-Фарленд, 1987; Реагсе, 1998).

Разнообразные классические условнорефлекторные реакции можно наблюдать в экспериментах на животных, если проводить полиграфическую регистрацию ряда физиологических процессов организма (ЭКГ, ЭЭГ, плетизмог-рамму и др.). Как и в случае слюнного рефлекса, сочетание положительного (например, пищевого) безусловного раздражения с нейтральным приведет к тому, что последний начнет вызывать изменения в вегетативных функциях организма, которые до этого провоцировались только непосредственно самим безусловным воздействием. Полиграфическая регистрация обычно используется при изучении отрицательных (аверсивных) классических УР. Много работ такого рода проводится также для оценки реактивности нервной системы к действию стрессорных агентов и ее устойчивости к стрессу. В настоящее время классические УР наиболее часто исследуют на моделях, использующих вкусовое отвращение и реакцию третьего века (мигательной перепонки). Было, например, обнаружено, что классические УР образуются с разной скоростью в зависимости от того, какие физиологические системы вовлечены в их формирование. Так, УР избегания пищевого яда у крыс (как правило, используют хлорид лития) формируется легко, если введение его в организм сочетается с предложением животному пищи определенного вкуса. Однако УР избегания яда формируется с трудом или не образуется совсем, если его введение сочетается, например, со звуковым раздражением. На схеме (рис. 3.3) показано, как авторы (Garcia et al., 1970) представляют себе гипотетический механизм формирования такого УР вкусового отвращения. Вкусовой стимул, сочетающийся с пищевым отравлением, ведет к образованию УР вкусового отвращения. При сочетании звука с ударом тока образуется УР на боль. В то же время иное сочетание, например вкусового и болевого стимулов, не ведет к образованию УР.

Классический УР - сокращение мигательной перепонки при действии тактильного или звукового УС - обычно изучают на кроликах. При действии на роговицу глаза безусловного раздражителя - воздушной струи (или слабого удара тока) - мигательная перепонка сокращается. Это сокращение можно регистрировать специальным прибором и оценивать его интенсивность. Если безусловное раздражение сочетать с каким-либо нейтральным стимулом, например звуком, то после нескольких сочетаний мигательная перепонка будет сокращаться уже при изолированном действии этого звука, который становится условным сигналом (см. рис. 3.2).

Рис. 3.3. Схема, показывающая избирательность ассоциаций между УС и подкреплением при формировании классических УР.

3.2.2.3. Инструментальные условные рефлексы (или обучение методом проб и ошибок)

Начало исследований инструментальных УР связано с именем Э. Торндайка (см. 2.4.1), хотя их анализ проводился и в лаборатории И. П. Павлова. В лаборатории И. П. Павлова “классические” УР носили название условных рефлексов 1-го рода, а инструментальные - условных рефлексов 2-го рода. В монографии Ю. Конорски (1969) на большом экспериментальном материале дается анализ сходства и различия между ними.

В опытах с “проблемными ящиками” Торндайк наблюдал, как посаженная в ящик кошка ищет выход, пытаясь открыть дверцу разными способами (рис. 3.4А) (для этого нужно было нажать на задвижку или потянуть за пружину). Кошка сначала совершает много разных действий (проб), которые в своем большинстве бывают неверными (ошибки), пока случайно не откроет яшик. При повторении опытов она выходит из ящика все быстрее и быстрее. Идея эксперимента была подсказана Торндайку К. Ллойдом-Морганом, наблюдавшим, как его собака манипулирует с задвижкой калитки, чтобы “улизнуть” из дома (рис. 3.5). Такое обучение Торндайк и назвал “методом проб и ошибок”. В дальнейшем обучение животного подобным действиям получило название инструментальных (или оперантных) УР.

Торндайк первым предложил количественную оценку динамики обучения животного инструментальному навыку. Для этого он ввел так называемые “кривые научения”, примеры которых приведены на рис. 3.4Б.

Между классическими и инструментальными УР существуют определенные различия.

Рис. 3.4. Инструментальные УР.

А - один из вариантов “проблемного ящика”, предложенный Э. Торндайком для исследования способности животного к решению.задачи методом “проб и ошибок”; Б - примеры кривых научения при использовании этого метода. По оси ординат - время, затраченное на решение задачи, по оси абсцисс - последовательные предъявления теста.

При классических УР временная связь между условным сигналом и безусловной реакцией возникает непроизвольно при действии безусловного раздражителя (подкрепления). При инструментальных УР подкрепление, например пища, дается только после того, как животное совершает определенное действие, которое не имеет прямой связи с безусловным раздражителем. В классическом УР выделение слюны происходит в ответ на контакт пищи с рецепторами полости рта, и эта реакция может стать услов-норефлекторной. В отличие от этого при выработке инструментального УР пищевое подкрепление изначально никак не связано ни с протягиванием лапы, ни с побежкой в лабиринте. Однако мы можем давать животному пищу сразу после того, как оно сделало такое движение, и вскоре животное будет его совершать, чтобы получить подкрепление. К категории инструментальных УР относится формирование навыка нажатия на рычаг (или клевания кнопки, как на рис. 3.6) для получения порции пищи. После работ Б.Скиннера этот УР стал основным в исследованиях бихевиористов (анализ связей “стимул-реакция”). К инструментальным УР относится также обучение подопытного животного находить путь к пище или избегать неприятных стимулов в лабиринте. Инструментальным УР является и реакция избегания - навык переходить в тот отсек экспериментальной камеры, где отсутствует болевое подкрепление (рис. 3.7).

Рис. 3.5. Рисунок, сделанный по фотографии “исторического” эпизода. Собака К. Л. Моргана научилась открывать задвижку калитки, получая тем самым возможность “обрести свободу”. Эта ситуация считается прототипом торндайковского “проблемного ящика”.

Рис. 3.7. Челночные камеры для исследования у лабораторных крыс и мышей реакции активного избегания.

А - современная установка для изучения условной реакции активного избегания, которая обычно состоит из 4 челночных камер с автоматизированным управлением и выводом результатов на экран монитора; Б - отдельная челночная камера.

Включению тока предшествует включение УС - звука или света. Чтобы избежать болевого воздействия, животное перебегает в другую половину камеры. По прошествии небольшого периода времени (как правило, его длину варьируют, чтобы не вырабатывать у животного УР на время) ток включают в той половине камеры, куда оно перед этим перебежало. УР считается выполненным, если животное перебегает в безопасную половину камеры во время действия УС и до включения тока. Обширные исследования, выполненные сторонниками идей бихевиоризма, привели к появлению целого ряда новых терминов и понятий и созданию специфического языка для описания закономерностей процесса обучения, обнаруженных только благодаря примененным ими подходам. Многие термины сначала использовались как чисто технические - для объективного описания данных (знакомство с ними может помочь при чтении научных статей бихевиористов). К таким терминам, в частности, относятся:

оперантное поведение - спонтанные действия, не вызванные каким-либо очевидным стимулом;
реактивное поведение - всякое поведение, которое совершается в ответ на определенный стимул;
режим подкрепления (reinforcement schedule): соотношение числа реакций (например, нажатий на рычаг) и вознаграждений (например, кусочков пищи; подробнее см. ниже);
постоянный (или переменный) интервал (fixed or variable interval) -
вознаграждение дается через определенные интервалы времени, в период которых животное может осуществлять двигательные реакции (эти интервалы могут быть постоянными или варьировать по длительности), но по истечении этого интервата подкрепляется только первая реакция;
фиксированное (или переменное) соотношение (fixed ratio or variable ratio) - подкрепление дается животному только после того, как онопроизведет какое-то количество реакций (нажатий или клеваний. Можно давать подкрепление только после определенного числа реакций (фиксированное соотношение) или это число может каким-то образом варьировать (переменное соотношение);
смежность (contiguity) - этим термином обозначают постулируемое возникновение связей между стимулами и возникающими на их основе реакциями, а также совпадение УС с реакцией животного или УС с подкреплением, которое необходимо для возникновения УР;
ключ (сие) - обычно это либо рычаг, на который нажимает крыса, либо освещенный кружок, по которому наносит удар клювом голубь (этот термин, обычный для работ бихевиористов, не следует путать с термином “ключевой стимул”, принятым в этологии для обозначения видоспецифических стимулов, вызывающих инстинктивные реакции (см. 2.11).

На рис. 3.6 схематически изображена камера для выработки инструментальных УР у голубей. Скиннер считал, что любое поведение, относящееся к категории “оперантное”, можно модифицировать, если при его выполнении давать животному подкрепление. Именно такой подход он предложил как эффективный способ анализа поведения. Если для выработки классических УР необходимы сочетания условных сигналов и подкрепления, то при методике свободного оперантно-го поведения, предложенной Скиннером, экспериментатор сопровождает подкреплением выполнение животным только определенного, намеченного им действия. Например, крысу можно обучить нажимать на рычаг, если сначала сопровождать подкреплением любые ее действия в той части камеры, где он находится. Постепенно крыса обучается держаться вблизи рычага, и тогда подкрепление дают только, если она касается рычага мордой или лапой (для этого иногда на рычаг даже кладут пишу). Через некоторое время подкрепление дается только после выполнения четких движений - нажатий (одного или нескольких) лапой на рычаг. Такое постепенное видоизменение поведения животного в результате вмешательства экспериментатора называется методом последовательного приближения или формированием (shaping) поведения. Деление условных рефлексов на классические и инструментальные, удобное методически, не означает, что они имеют совершенно разную природу. В их основе лежат сходные нейрофизиологические механизмы, а любое “чисто” инструментальное действие животного всегда сопровождается реакцией, которая относится к классическим УР. И наоборот, в любом “чисто” классическом УР можно обнаружить двигательный компонент, который по своим свойствам относится к инструментальным (Борукаев, 1982). О связи классических и инструментальных УР свидетельствует также “самоформирование” условной реакции {autoshaping). Например, если голодного голубя поместить в камеру Скиннера и в течение 5 с освещать ключ для клевания с интервалом в 1 мин, а после прекращения освещения давать порцию пиши, то голубь сначала не обращает внимания на ключ. Однако после нескольких таких сеансов формируется инструментальная реакция, и он быстро начинает клевать ключ независимо от освещения. Постепенно голубь научается клевать ключ только при его освещении, т.е. реакция становится более точной - она самоформируется. В данном случае она очень близка к классическому УР, поскольку голубь клюет ключ как бы вместо зерна, даже в отсутствие подкрепления.

С помощью метода “последовательного приближения” у животных удается сформировать не только клевание ключа при его освещении, но и самые разнообразные, сложные и иногда неожиданные навыки. В опытах Скиннера голуби “играли” в пинг-понг, а крысы могли подтянуть к себе с помощью бечевки бильярдный шар, взять его в передние лапы и засунуть в трубку, расположенную на 5 см выше пола клетки (описание экспериментов П. Эпштейна, посвященных формированию сложных навыков у голубей, будет дано в гл. 4.8.2). Метод последовательного приближения составляет основу дрессировки цирковых и служебных животных. Примером продуктивного использования принципов бихевиоризма, и в частности роли метода последовательного приближения в формировании поведения, является работа знаменитой американской дрессировщицы дельфинов и психолога К. Прайор(1995). Тезис Скиннера о том, что любые движения, на которые способно животное данного вида, равновероятно можно использовать для инструментального научения, был достаточно обоснованно подвергнут сомнению в работе его коллег - К. и М. Бреландов (Breland, Breland, 1961). Некоторые виды животных при обучении манипуляциям с предметами производят “заданные” экспериментатором действия только после выполнения некоторых врожденных (инстинктивных) действий либо совсем не могут им научиться. Так, например, обучая енота нажимать на рычаг, Бреланды заметили, что нажатию предшествует видоспецифи-ческое движение лап - “полоскание”, характерное для этого вида при добыче пищи из ручья (за что енота и называют “полоскун”). На основании таких наблюдений возникло представление о предрасположенности к определенным видам обучения (подробнее см.: Зорина и др., 1999). Образование инструментальных УР по механизму “последовательного приближения” играет важную роль в организации поведения животных не только в эксперименте, но и в естественных условиях. Обучение по методу последовательного приближения может происходить самым неожиданным образом. Об этом, в частности, свидетельствует получившая широкую известность в начале XX века история “умного Ганса”. Это был конь, который демонстрировал способность “считать”, “складывать”, “извлекать корни”, отвечать на вопросы и т.п. (рис. 3.8). Столь “разумное” поведение объяснялось тем, что конь научился замечать малоуловимые движения дрессировщика, которые тот непроизвольно совершал, видя, что конь вот-вот даст правильный ответ. Ориентируясь на эти условные сигналы, конь в нужный момент прекращал стучать копытом.

Рис. 3.8. Инструментальные условные рефлексы у дрессированной лошади “умного Ганса”. На фотографии видно, как ударами копыта по специальной доске Ганс сигнализировал “правильный” ответ (по Н. Н. Ладыгиной-Котс, 1914). В начале XX века (1900-1904) барон В. фон Остен, убежденный в огромных умственных способностях лошадей, обучал нескольких из них различению цветов, азбуке и “счету”. Узнавание каждой буквы или цифры лошадь обозначала соответствующим числом ударов копыта. Друг фон Остена художник Редлих обучил таким же образом свою собаку. Наиболее способным учеником оказался орловский рысак Ганс, который производил достаточно сложные арифметические подсчеты, отвечал на разнообразные вопросы, а иногда высказывался по собственной инициативе. Так, супруги Н. Н. и А. Ф. Котс, специально приехавшие для знакомства с ним в 1913 году, рассказывали, что после нескольких относительно коротких ответов на вопросы Ганс заявил: “В поле я встретил милую госпожу Краль, которая меня кормила”. Поведение его было столь впечатляющим, что вводило в заблуждение не только публику, но даже членов специальных комиссий, включая Н. Н. Лады-гину-Котс. Предполагали, что хозяин подает коню некие скрытые сигналы (как дрессировщик - цирковым животным), однако его обследовали 13 экспертов (комиссия психолога К. Штумпфа) и не обнаружили никакого обмана. Они засвидетельствовали, что Ганс действительно “считает” и никаких скрытых сигналов ему не подают. И лишь много позднее наблюдатели постепенно заметили, что Ганс отвечает только на те вопросы, ответ на которые знает сам экспериментатор. Специальный анализ, проведенный психологом О. Пфунгстом, показал, что животное реагирует на мельчайшие непроизвольные (идеомоторные) движения экспериментатора, например на отклонения корпуса на 2 мм, микродвижения бровей, мимику и т.п. Эта невольная подача сигналов происходила, по-видимому, из-за эмоционального напряжения человека, по мере того как число ударов копытом приближалось к искомому, Даже картонный щит, которым пробовал отгородиться от Ганса экспериментатор, не помогал: животное все равно улавливало какие-то только ему понятные знаки для определения правильного ответа. Для проверки своего предположения Пфунгст специально научил Ганса реагировать на микродвижения, которые он совершал уже сознательно, и продемонстрировал комиссии механизм и природу “математических способностей” этой лошади.

История “умного Ганса” оставила заметный след в развитии науки о поведении животных:

она показала, сколь сложное поведение могло быть результатом обучения методом проб и ошибок;
продемонстрировала справедливость “канона Ллойда Моргана” (см. 2.3) и актуальность его применения, поскольку в основе поведения этой “мыслящей лошади” лежали чисто условнореф-лекторные, а не связанные с мышлением механизмы;
впервые привлекла внимание к проблеме чистоты эксперимента с точки зрения возможности неосознанного влияния экспериментатора на его результаты;
заставила по-новому взглянуть на возможности восприятия животных: способность уловить едва заметные движения человека свидетельствовала об их большой наблюдательности и способности концентрировать внимание.

Необихевиоризм Б.Ф. Скиннера. Беррес Фредерик Скиннер (1904 - 1990) – один из крупнейших представителей бихевиорального направления, по мнению многих американских исследователей науки – один из самых уважаемых психологов XX века. Его работы заложили основы американской науки о поведении. Вслед за Уотсоном, Скиннер считал, что наука о поведении человека не отличается принципиально от других естественных наук, построенных на фактах. У таких наук общая цель – предсказать и проконтролировать изучаемое явление (в данном случае – поведение человека). Вторым принципиальным положением, легшим в основу скиннеровского подхода, стало утверждение о том, принципы поведения организмов, стоящих на более низких ступенях развития, аналогичны таковым принципам поведения организмов, стоящих на более высоких ступенях развития. Собственно, здесь также имело место развитие традиций Торндайка и Уотсона – данные, полученные в экспериментах на цыплятах и кроликах, экстраполировались на поведение человека. Поскольку поведение всех организмов подчиняется одним и тем же законам, особое значение придается анализу поведения единичных организмов. Скиннер считал, что вместо того, чтобы делать предположения о поведении несуществующего усредненного человека, психологи должны научиться предсказывать влияние отдельных переменных на компоненты поведения отдельного организма. Такой подход не требует применения традиционных статистических методик; он требует знания законов поведения реального индивида. Основным законом, лежащим в основе бихевиоральной теории поведения, считал Скиннер, является закон причинно-следственных отношений между условиями окружающей среды (стимулами) и открытым поведением (реакцией) организма. Практической целью этой науки является возможность манипулирования переменными окружающей среды с целью изменения поведенческой реакции организма. Одним из главных научных достижений Скиннера стала его концепция оперантного поведения . Рассмотрим ее основные положения.

Люди (да и животные) в реальной жизни редко действуют согласно классической схеме S – R . Подобное поведение Скиннер называетреспондентным (от англ. respond – отвечать, реагировать), или обусловливанием типа С (стимульным). Скиннер считал, что гораздо чаще организм активно воздействует на свое окружение, с целью добиться желаемого положения вещей. Такой тип поведения Скиннер называлоперантным . Оперантное поведение определяется событиями, которые следуют за реакцией организма (обусловливание типа Р). То есть, последствия поведения изменяют тенденцию организма повторять данное поведение в будущем. Если последствия благоприятны для организма, то вероятность повторения данного поведения в будущем увеличивается. В этом случае говорят, что произошло подкрепление реакции. Напротив, если последствия реакции неблагоприятны для организма, тогда вероятность появления данного поведения в будущем уменьшается. Как видно, поведение определяется подкреплением . Этот термин пришел в бихевиоризм из работ И.П. Павлова и обозначает объекты или условия, которые удовлетворяют те или иные потребности организма и способствуют закреплению предшествующего поведения. Скорость, с которой оперантное поведение приобретается и сохраняется, зависит от режима подкрепления. Режим подкрепления – это правило, устанавливающее вероятность, с которой будет происходить подкрепление. Скиннер выделял несколько режимов подкрепления.

1.
непрерывное подкрепление предполагает появление подкрепления каждый раз, когда организм демонстрирует желаемую реакцию. Такой режим способствует быстрому закреплению желаемой реакции в поведении; однако, он часто неосуществим или неэкономичен.

2.
режим прерывистого подкрепления может представлять более реальную альтернативу режиму непрерывного подкрепления. Выделяют несколько видов прерывистого подкрепления.

Режим подкрепления с постоянным соотношением. Организм подкрепляется после совершения заранее определенного числа желаемых реакций. Данный режим позволяет также быстро закрепить в поведении желаемую реакцию, а также добиться высокой частоты ее проявления.
Режим подкрепления с постоянным интервалом. Организм подкрепляется через заранее установленные временные интервалы. В реальной жизни примерами использования такого режима подкрепления является регулярная выплата зарплаты в учреждениях, регулярные проверки академической успеваемости студентов (сессии). Для данного режима характерна низкая частота появления желаемой реакции срезу после подкрепления.
Режим подкрепления с вариативным соотношением. Организм подкрепляется после совершения варьирующего вокруг определенного среднего числа реакций. Режим обеспечивает медленное закрепление в поведении желаемой реакции, но также и медленное его угасание в случае отсутствия подкрепления.
Режим подкрепления с вариативным интервалом. Организм подкрепляется через неопределенный временной интервал. Частота появления желаемой реакции в этом случае зависит от длины интервала: частое подкрепление порождает частое реагирование, а редкое подкрепление – редкое реагирование. Как и в предыдущем случае, сформированная в таком режиме подкрепления реакция угасает медленно в случае отсутствия подкрепления.

Изучая возможности научения и контроля за поведением человека, Скиннер обращал особое внимание на различные типы подкрепления и их сравнительную эффективность. С точки зрения способности удовлетворять биологические потребности организма, он выделял два вида подкрепления – первичное и вторичное. Первичное подкрепление – это любое событие или объект, само по себе способное удовлетворять потребности организма. Его ценностное значение абсолютно и не зависит от научения. Вторичное (условное) подкрепление – это событие или объект, которые приобрели способность подкреплять поведение организма в результате тесной ассоциации с первичным подкреплением.
В жизни современного человека условное подкрепление является основным видом подкрепления при научении социальному поведению и контроле за ним. Наиболее яркий пример такого условного подкрепления – это деньги. Сами по себе деньги не могут удовлетворить ни одну биологическую потребность; но, ассоциируясь с тем, что на них можно приобрести (еда, питье, физический комфорт), они становятся значительной подкрепляющей поведение силой. Обратите внимание на тот факт, что деньги ассоциируются более чем с одним первичным подкреплением. Это явление называется генерализацией условного подкрепления. Другие виды генерализованных условных подкреплений – это внимание, похвала, подчинение себе других и социальное одобрение.
Изучая возможности контролировать поведение людей в социуме, Скиннер попытался определить сравнительную эффективность подкрепления и наказания. Изначально наказание рассматривалось как противоположность подкреплению, как предъявление аверсивного (неприятного или болевого) стимула в ответ на определенную оперантную реакцию. Цель наказания – побудить организм не повторять данную реакцию. Позднее Скиннер расширил свою концепцию наказания, включив в нее позитивное и негативное наказание. Позитивное наказание происходит тогда, когда поведение приводит к появлению аверсивного стимула. Негативное наказание имеет место тогда, когда поведение приводит к устранению (возможного) позитивного стимула. По аналогии с наказанием, подкрепление также может быть позитивным (предъявление положительно стимула) и негативным (удаление аверсивного стимула).
Скиннер считал, что все формы контроля за поведением, использующие аверсивные стимулы, неэффективны и поэтому нежелательны в обществе. Особенно неэффективным средством контроля он считал наказание. Причина в том, что из-за своей угрожающей природы наказание может вызывать нежелательные эмоциональные и социальные побочные эффекты. Более того, наказанный человек предположительно знает, что делать нельзя, но может не знать, какое поведение является желательным. Неэффективность современной пеницитарной системы Скиннер связывал именно с тем, что в ней используются неэффективные методы контроля за поведением осужденных.

6. Предмет, задачи и основные понятия и парадигмы когнитивного необихевиоризма Э. Толмена

Основы необихевиоризма заложил Э.Толмен (1886-1959): поведение – это целостный акт, который характеризуется собственными свойствами: направленностью на цель, понятливостью, пластичностью, селективностью, выражающейся в готовности выбирать средства, ведущие к цели более короткими путями. Он признавал совместимость бихевиоризма с гештальтпсихологией и глубинной психологией. Толмен выделял 3 разновидности детерминант поведения: независимые переменные (первоначальные причины поведения) стимулы и исходное физиологическое состояние организма; способности – видовые свойства организма; вмешивающиеся внутренние переменные – намерения и познавательные процессы. Когнитивная карта – структура, которая складывается в мозгу животного в результате переработки поступающих извне воздействий.

Классическое обуславливание – выработка условного рефлекса. С помощью сопровождения В оперантном научении , в отличие от классического обуславливания, мы выращиваем активное животное, активность которого мы лишь направляем в нужное русло подкреплениями. Допустим, нам нужно научить животное проходить по тонкой жердочке. Мы подкрепляем его «успехи» - когда он подходит к жердочке, забирается на нее, начинает идти. За повторные успехи уже не так награждаем, то есть повышаем критерий задания. То есть прошло наше жердочку до конца, мы его подкормили, больше не подкрепляем, когда оно успешно забирается на жердочку, только когда доходит до конца. Мы можем подкреплять не всегда – животное все равно будет выполнять действие (вариативный режим подкрепления). Вариативный режим подкрепления действует, когда поведение уже сформировано, надобность в постоянно стимулировании отпадает, достаточно периодически подкреплять животное. Возможность вариативного режима подкрепления - одна из причин появления суеверий и предрассудков у людей.

Работа Б.Ф. Скиннера «Технология поведения» была опубликована в 1971 году.

Технология поведения – вот что необходимо нам. Мы разрешим наши проблемы достаточно быстро, если сможем регулировать рост народонаселения так же точно, как мы корректируем курс космического корабля, или развивать сельское хозяйство и промышленность хотя бы с некоторой долей уверенности, с которой мы ускоряем высокоэнергетические частицы, или приближаться к мирному сосуществованию с таким же неизменным прогрессом, с каким физика приближается к абсолютному нулю. Двадцать пять столетий назад можно было утверждать, что человек понимает самого себя, так же как и любую другую часть своего мира. Сегодня он понимает себя менее всего. Физика и биология проделали длинный путь, но наука о поведении человека не претерпела подобного развития. Скиннер сравнивает науку и поведения, действия человека. «Наверное, первый опыт человека, касающийся причин, исходит из его собственного поведения: предметы движутся, потому что он двигает их. Если движутся другие предметы, то это потому, что кто-то другой двигает их, и если тот, кто двигает, не может быть увиден, то это потому, что он невидим. Подобным образом греческие боги служили причинами физических явлений. Как правило, они находились вне предметов, которые они приводили в движение, и должны были «войти» в них и «овладеть» ими. Физика и биология вскоре отказались от подобных объяснений и обратились к более действенным категориям причин, но в области изучения человеческого поведения этот решительный шаг так и не был сделан. Здравомыслящие люди больше не верят, что людьми овладевают демоны (хотя и в наши дни порой практикуется изгнание нечистой силы, и одержимые снова стали появляться в работах психотерапевтов), но поведение человека в большинстве случаев до сих пор приписывается пребывающим в нем агентам. Считается, например, что малолетний преступник страдает нарушениями личности. Не было бы никакого смысла так говорить, если бы личность не являлась чем-то отличным от тела, которое и попало в переплет. Это различие становится ясным, когда утверждается, что одно тело содержит несколько «личностей», которые контролируют его различными способами в разное время. Психоаналитики идентифицировали три таких «личности» – Я, Сверх-Я и Оно, и считается, что взаимодействия между ними отвечают за поведение человека, в котором они находятся.»

Никто не удивится, услышав, что человек, несущий хорошие вести, идет быстрее, потому что он исполнен ликования, или действует неосторожно в силу своей импульсивности, или противостоит ходу событий только благодаря силе воли. До сих пор и в физике, и в биологии можно обнаружить поверхностные ссылки на цели, однако им нет места в квалифицированной деятельности. Но тем не менее почти все объясняют человеческое поведение намерениями, стремлениями, замыслами и целями. До сих пор многозначительный вопрос о способности машины вести себя целенаправленно подразумевает, что наличие такой способности означало бы ее более близкое сходство с человеком.

Нам говорят, что для предотвращения перенаселенности в мире мы должны изменить отношение к детям, преодолеть чувство гордости за размер семьи или за сексуальную потенцию, сформировать некое чувство ответственности по отношению к потомкам и уменьшить участие большой семьи в заботе о старости. Борясь за мир, мы должны вести борьбу с волей к власти или паранойяльными идеями лидеров. Мы обязаны помнить, что войны начинаются в умах людей, что в самом человеке есть нечто смертоносное – возможно, инстинкт смерти, ведущее к войнам, и что человек агрессивен по природе. Чтобы разрешить проблемы малоимущих, мы должны вселять чувство собственного достоинства, поощрять инициативность и бороться с чувством неудовлетворенности. Чтобы ослабить недовольство молодежи, мы обязаны дать ей веру в успех и избавить от чувств отчужденности и безнадежности. Осознав, что у нас нет эффективных способов сделать хоть что-нибудь из перечисленного, мы можем пережить кризис веры или потерю уверенности, которые можно преодолеть только возвратом к вере во внутренние возможности человека. Это основная идея, которую почти никто не оспаривает. И хотя в современной физике и большей части биологии нет ничего подобного, этот факт хорошо объясняет, почему так долго сдерживалось развитие науки и технологии поведения.

Считается, что генетическая конституция человека, которая является результатом эволюции видов, объясняет часть механизмов сознания, а его собственная жизнь – все остальные. Например, вследствие (физической) конкуренции в ходе эволюции теперь люди испытывают (нефизические) агрессивные чувства, которые ведут к (физическим) враждебным действиям. Или (физическое) наказание маленького ребенка за сексуальные действия вызывает (нефизическое) чувство тревоги, которое мешает его (физическому) сексуальному поведению в зрелом возрасте. Нефизическая стадия, несомненно, связывает длительные периоды времени: агрессия уходит в прошлое на миллионы лет эволюции, а приобретенная тревога – в детство.

Почти все наши основные проблемы затрагивают поведение человека, и они не могут быть решены лишь посредством физических и биологических технологий. Необходима технология поведения, но мы все медлим с развитием науки, с помощью которой может быть получена такая технология. Единственная трудность заключается в том, что практически все науки, связанные с поведением, продолжают сводить его к состояниям сознания, чувствам, чертам характера, человеческой природе и т. д. Физика и биология когда-то придерживались подобной практики и развились лишь тогда, когда отказались от нее. Поведенческие науки изменяются медленно отчасти потому, что объяснительные сущности часто кажутся непосредственно наблюдаемыми, а отчасти по той причине, что было трудно найти другие виды объяснений. Важность окружающей среды очевидна, но ее роль остается неясной. Она не толкает и не тянет, она отбирает, а эту функцию трудно обнаружить и проанализировать. Роль естественного отбора в эволюции была определена лишь немногим более столетия назад, а избирательная роль окружающей среды в формировании и подкреплении поведения индивида только начинает осознаваться и подвергаться изучению. По мере понимания взаимодействия между организмом и средой, влияния, некогда приписанные состояниям сознания, чувствам и чертам характера, начинают переходить к понятным всем условиям, а следовательно, может стать доступной и технология поведения. Но и она не решит наших проблем до тех пор, пока не сменит традиционные донаучные взгляды, которые решительно защищают свои позиции. Свобода и достоинство иллюстрируют эту трудность. Они являются собственностью автономного человека в традиционной теории и крайне важны для существующих порядков, в которых человек несет ответственность за свое поведение и получает должное за свои достижения.

История современной психологии Шульц Дуан

Б. Ф. Скиннер (1904–1990)

Б. Ф. Скиннер (1904–1990)

Самой влиятельной фигурой в психологии в течение нескольких десятилетий являлся Б. Ф. Скиннер. Один из историков психологии назвал его «без сомнения, наиболее знаменитым американским психологом в мире» (Gilgen. 1982. P. 97). Опрос историков психологии и заведующих кафедрами показал, что Скиннер является одним из самых выдающихся ученых современности (Кот, Davis & Davis. 1991). Когда в 1990 году Скиннер умер, редактор журнала «Американский психолог» писал о нем как об «одном из гигантов нашей области науки», который «оставил неизгладимый след в психологии» (Forwer. 1990. P. 1203). А в некрологе «Журнала по истории бихсвиоральных наук» о нем писали как о «ведущей фигуре в бихевиоризме нынешнего века» (Keller. 1991. P. 3).

Начиная с пятидесятых годов и в течение многих лет Скиннер являлся ведущим бихевиористом Соединенных Штатов Америки и привлекал огромное количество верных и восторженных продолжателей и сторонников. Он разработал программу бихевиорального контроля общества, изобрел автоматизированный детский манеж и стал одним из главных вдохновителей и создателей методик модификации поведения и обучающих машин. Он написал роман «Уолден Два» (Walden Two ), который и через пятьдесят после выхода в свет оставался популярным. В 1971 году его книга «По ту сторону свободы и достоинства» (Beyond Freedom and Dignity ) стала национальным бестселлером, а сам Скиннер - «самым популярным персонажем различных национальных и городских ток - шоу» (Bjork. 1993. P. 192). Он стал знаменитостью: его прекрасно знала и широкая общественность, и коллеги.

Страницы жизни

Скиннер родился в городке Саскуеханна, штат Пенсильвания, где и жил до поступления в колледж. Согласно его собственным воспоминаниям, его детство прошло в обстановке любви и спокойствия. Он учился в той же самой школе, где когда - то учились его родители; в выпускном классе Скиннера было всего семеро учеников. Он любил свою школу и по утрам всегда приходил раньше всех. В детстве и отрочестве он увлекался созданием самых разных предметов: плотов, тележек, каруселей, пращей и рогаток, моделей самолетов, и даже паровой пушки, которая стреляла поверх крыши соседского дома картофелинами и морковками. Несколько лет он потратил на то, чтобы изобрести вечный двигатель. Он также много читал о поведении животных и держал дома целый зоопарк, состоявший из черепах, змей, ящериц, жаб и бурундуков. Как - то раз на ярмарке он увидел дрессированных голубей: много лет спустя он сам научил голубей разным трюкам.

Психологическая система Скиннера отражает опыт его жизни в детстве и юности. Согласно его собственным взглядам, жизнь человека является плодом прошлых подкреплений. Он утверждал, что его собственная жизнь была настолько предопределенной, упорядоченной и правильной, насколько его система предписывает быть любой человеческой жизни. Он полагал, что все аспекты человеческой жизни можно проследить до самых их истоков.

Скиннер поступил к Гамильтон колледж в Нью - Йорке, но там ему не понравилось. Он писал:

Я никогда не мог вписаться в студенческую жизнь. Я вступил в это братство, совсем нс зная. что это такое. Я не преуспевал в спорте и жестоко страдал, когда в хоккее меня били по голени или когда искусный баскетболист отыгрывал мяч от моего черепа… В сочинении, которое я написал после первого курса, я пожаловался на то. что в колледже меня постоянно одолевают ненужными требованиями (одно из них - ежедневное посещение церкви) и что большинство студентов не имеют никаких интеллектуальных интересов. На старших курсах я был уже открытым бунтовщиком. (Skinner, 1967. P. 392.)

Бунтарство Скиннера, в частности, проявлялось в розыгрышах, а также в том, что он шокировал студенческое сообщество и открыто высказывал критические замечания о факультете и об администрации. Его непослушание прекратилось только в день выпуска, когда перед началом торжественной церемонии президент колледжа предупредил Скиннера и его друзей, что если они не успокоятся, им не выдадут дипломов.

Скиннер все - таки успешно закончил колледж со степенью по английскому языку, правом принадлежности к обществу <Фи Бета Каппа> и стремлением стать писателем. На летнем писательском семинаре поэт Роберт Фрост с похвалой отозвался о стихотворениях и рассказах Скиннера. В течение двух лет после выпуска из колледжа Скиннер занимался литературной деятельностью, а затем решил, что ему <нечего сказать>. Его неудача на писательском поприще настолько обескуражила его, что он даже стал подумывать о консультациях психиатра. Он считал себя неудачником. Чувство собственной значимости было жестоко поколеблено.

Кроме того, он разочаровался в любви. Его отвергли по меньшей мере полдюжины молодых женщин, что доставляло ему, по его собственному выражению, сильную физическую боль. Один раз он был настолько потрясен, что выжег на своей руке инициалы возлюбленной. След от ожога остался на многие годы. Биограф отмечает, что «любовные интересы» Скиннера «всегда были несколько подавлены раздвоением чувств и разочарованием. Правда, вскоре Скиннер приобрел репутацию ветреника» (Bjork. 1993. P. 116).

Прочитав об экспериментах Уотсона и Павлова по формированию условных рефлексов, Скиннер круто повернулся от литературных аспектов человеческого поведения к научным. В 1928 году он поступил в аспирантуру Гарвардского университета по психологии - несмотря на то, что до этого ни разу нс прослушал курса психологии. По его собственным словам, он поступил в аспирантуру «не потому, что вдруг почувствовал непреодолимую тягу к психологии, а только из - за того. чтобы избавиться от невыносимой альтернативы» (Skinner. 1979. P. 37). Было иль не было у него у него непреодолимой тяги к психологии, но через три года он получил ученую степень доктора философии. По завершении научной работы, после защиты докторской диссертации, он преподавал в университете штата Миннесота (1936–1945) и университете штата Индиана (1945–1974), после чего вернулся в Гарвард.

Тема его диссертации относится к положению, которому Скиннер неуклонно следовал в течение всей своей карьеры. Он предположил, что рефлекс представляет собой корреляцию между стимулом и реакцией, и ничего более. В его книге 1938 года «Поведение организмов» (The Behavior of Organism ) описываются основные положения этой системы. Любопытно, что за первые восемь лет после публикации было продано всего лишь 500 экземпляров книги, и она получила в основном отрицательные рецензии, а пятьдесят лет спустя об этой книге говорили, что она «является одной из немногих книг, которые изменили облик современной психологии» (Thompson. 1988. P. 397).

Тем качеством описываемой в книге системы, которое изменило отношение к ней от полного провала до потрясающего успеха, было ее очевидное прикладное значение для самых разных областей психологии. «В шестидесятые годы началось восхождение звезды Скинпера, отчасти по причине принятия его идей в области образования, отчасти - благодаря растущему влиянию идей Скиннера в области клинической модификации поведения» (Benjamin. 1993. P. 177). Столь широкая применимость идей Скиннера соответствовала его устремлениям, поскольку он испытывал глубокий интерес к проблемам реальной жизни. Его более поздняя работа «Наука и человеческое поведение» (Science and Human Behavior . 1953 г.) стала основным учебником по бихевиоральной психологии.

Скиннер продолжал плодотворно работать до самой своей смерти в возрасте 86 лет - причем трудился он с тем же энтузиазмом, который проявлял и шестьдесят лет назад. В подвале своего дома он оборудовал персональный «скиннеровский ящик» - контролируемую среду, которая давала положительное подкрепление. Он спал там в большой желтой пластиковой коробке, в которой как раз помещался матрас, несколько полок с книгами, а также маленький телевизор. Каждый вечер он ложился спать в десять часов, спал три часа, час работал, затем спал еще три часа и вставал в пять часов утра, чтобы отработать еще три часа. Утром он отправлялся в свой кабинет в университете и там снова работал, а во второй половине дня давал себе положительное подкрепление, слушая музыку. Кроме того, огромное положительное влияние на него оказывал процесс написания статей. «Мне очень нравится писать, и было бы очень жаль, если бы когда - нибудь мне пришлось от этого отказаться» (Skinner. 1985, цит. по: Fallen. 1992. P. 1439).

В возрасте 78 лет Скиннер написал статью под названием «Как сохранить интеллект в старости» (Intellectual Self - Management in Old Age ), в которой он ссылался на свой собственный опыт (Skinner. 1983а). В этой статье говорится о том, как полезно в старости упражнять мозг по несколько часов в день, при этом обязательно давая перерывы между всплесками активности - для того, чтобы поддержать слабеющую память и не допустить снижения интеллектуальных способностей.

В 1989 году у Скиннера обнаружили лейкемию. Жить ему оставалось не более двух месяцев. В интервью по радио он говорил о своих чувствах:

Я не религиозный человек, и потому меня не беспокоит, что произойдет со мной после смерти. И когда мне сказали, что у меня такая болезнь и что через несколько месяцев я умру, я не испытал никаких эмоций. Ни паники, ни страха, ни тревоги. Вообще ничего. Единственное, что тронуло меня и от чего мои глаза увлажнились, была мысль о том, как я сообщу об этом жене и дочерям. Видите ли, когда умираешь, ты невольно ранишь тех, кто тебя любит. И ничего с этим не поделаешь… Я прожил хорошую жизнь. С моей стороны было бы довольно глупо в каком - либо смысле на нее жаловаться. А потому я радостно проживу оставшиеся мне месяцы - так же, как я всегда радовался жизни. (Цит. по: Catania. 1992. P. 1527.)

За восемь дней до смерти, сильно ослабевший, Скиннер представил свою статью на заседание Американской психологической ассоциации в Бостоне. Она была посвящена наблюдаемым и ненаблюдаемым стимулам, и, соответственно, респондентному и оперантному поведениям .

Бихевиоризм Скиннера

Оперантное поведение возникает без воздействия каких - либо внешних наблюдаемых раздражителей. Реакция организма кажется спонтанной в том смысле, что внешне она никак не связана с каким - либо наблюдаемым раздражителем. Это вовсе не означает, что стимула, вызывающего ту или иную реакцию, не существует; это значит, что при возникновении данной реакции ни один стимул не является наблюдаемым. С экспериментальной же точки зрения, если стимул отсутствует, то это значит, что он нс применялся, а потому и не наблюдается.

Другим различием между респондентным и оперантным поведением является то, что оперантное поведение воздействует на окружающую организм среду, в то время как респондентное поведение этого не делает. Подопытная собака в лаборатории Павлова, закованная в сбрую, не может сделать ничего иного, как только реагировать (например, пускать слюну), когда экспериментатор предлагает ей какие - либо стимулы. Собака сама по себе ничего не может сделать, чтобы достать стимул (пищу).

Оперантное поведение крысы в коробке Скиннера, напротив, является инструментальным в том смысле, что крыса достигает своего стимула (пищи). Когда крыса нажимает на рычаг, она получает пищу; а если не нажимает на рычаг, то не получает пищи. Таким образом крыса воздействует на окружающую среду. (Скиннер очень не любил термин «скиннеровский ящик», впервые введенный Халлом в 1933 году. Он сам называл это оборудование аппаратом оперантного формирования условных рефлексов. Однако термин «скиннеровский ящик» стал столь популярным, что вошел во все справочники и в настоящее время является в психологии общепринятым.)

Скиннер считал, что оперантное поведение характерно для повседневного научения. Поскольку поведение, как правило, носит оперантный характер, то наиболее эффективным подходом к науке о поведении является изучение обусловливания и угасания оперантпого поведения.

Классическая экспериментальная демонстрация заключалась в нажатии на рычаг в скиннеровском ящике. В этом эксперименте крыса, лишенная пищи, помещалась в ящик и получала полную возможность исследовать его. В ходе исследований она неизбежно должна была задеть рычажок, который приводил в действие механизм, выдвигающий полочку с пищей. После получения нескольких порций пищи, которые должны были служить подкреплением, у крысы довольно быстро формировался условный рефлекс. Обратите внимание, что поведение крысы (нажатие на рычаг) оказывает воздействие па окружающую среду и является инструментом приобретения пищи. Зависимая переменная в этом эксперименте проста и понятна: это скорость реакции.

На основании этого эксперимента Скиннер сформулировал свой закон приобретения , который гласит, что сила оперантного поведения возрастает, если поведение сопровождается подкрепляющим стимулом. Несмотря на то, что для формирования быстрой реакции нажатия на рычажок требуется практика, ключевым параметром все - таки является подкрепление. Практика сама по себе ничего не дает: она только предоставляет возможность возникновения дополнительного подкрепления.

Закон приобретения Скиннера отличается от положений о научении у Торндайка и у Халла. Скиннер вообще не касался таких последствий подкрепления, как боль - приятное ощущение или удовольствие - неудовлетворение, как это делал Торндайк. Скиннер так же не пытался интерпретировать подкрепление в терминах снижения воздействия побуждений, как это делал Кларк Халл. Системы Торндайка и Халла были объясняющими; система Скиннера является строго описательной.

Скиннер и его последователи провели огромную исследовательскую работу по проблемам научения - таким, как роль наказания в приобретении навыков, воздействие различных систем подкрепления, мера угасания оперантного обусловливания, наличие вторичного подкрепления и т. д.

Кроме крыс они работали и с другими подопытными животными, и с людьми, используя в качестве основного подхода тот же самый принцип <скиннеровского ящика>. Если в качестве подопытных животных использовались голуби, то они должны были клюнуть в определенную точку или пятно; подкреплением являлась пища. Оперантное поведение людей включало такие аспекты, как решение задач, подкрепленное похвалой или осознанием того, что был дан правильный ответ.

Скиннер сообщал, что в качестве подкрепления для своей трехлетней дочери он использовал поглаживание по спине. Однако этот эксперимент обернулся неожиданным образом. Однажды он укладывал девочку спать, гладил ее по спинке и вдруг решил проверить, насколько это является поощряющим подкреплением. «Я подождал, - написал Скиннер, - чтобы она подняла ногу, и тогда погладил ее. Почти сразу же она снова подняла ногу, и я снова погладил ее. Она засмеялась. «Ты над чем смеешься?» - спросил я, и она ответила: «Стоит мне поднять ногу, как ты начинаешь меня гладить!»» (Skinner. 1987. P. 179).

Схема подкрепления

Уже первые исследования в <скиннеровском ящике> с нажатием рычага продемонстрировали значение подкрепления для оперантного поведения. В этой ситуации поведение крысы при каждом нажатии на рычаг получало подкрепление. То есть всякий раз, выполнив правильное действие, крыса получала пищу. Скиннер отмечал, что хотя в реальной жизни подкрепление далеко не всегда бывает последовательным или непрерывным, тем не менее, научение все - таки происходит и поведение сохраняется, даже если подкрепление было случайным или редким.

Не всегда, отправляясь кататься на коньках или на лыжах, мы попадаем на хороший лед или снег… Не всегда, приходя в ресторан, мы получаем хорошую пишу. потому что повара непредсказуемы. Звоня друзьям по телефону. мы не всегда получаем ответ, потому что друзья могут отсутствовать. …Подкрепляющие характеристики деятельности и обучения почти всегда являются прерывистыми. так как просто не имеет смысла контролировать подкреплением каждую реакцию. (Skinner. 1953. P. 99.)

Даже если вы проводите исследования постоянно, вы не при каждом эксперименте получаете реакцию А. На работе вас не каждый день хвалят и не каждый день повышают заработную плату. Каким образом на поведении сказывается такое непостоянное подкрепление? Является ли та или иной режим подкрепления лучшим, чем остальные, с точки зрения ее воздействия на поведение? Скиннер и его коллеги посвятили годы исследованию этих вопросов (Ferster & Skinner 1857; Skinner.1969).

Потребность в этих исследованиях возникла не из - за чисто научного любопытства, но на основе практической целесообразности - что, кстати, иллюстрирует тот факт, что наука нередко существенно отличается от той идеализированной модели, которая представляется в некоторых учебниках. Как - то раз в субботу вечером Скиннер обнаружил, что у него почти закончился запас корма. В то время (тридцатые годы) еще нельзя было купить корм у специальных компаний по снабжению исследовательских лабораторий; экспериментатор должен был делать шарики вручную, что являлось достаточно длительным и трудоемким процессом.

Вместо того, чтобы потратить свои выходные на изготовление кормовых шариков, Скиннер задал себе вопрос: что произойдет, если он будет давать подкрепление своим крысам один раз в минуту, независимо от того, какое будет количество ответных реакций? При таком подходе ему потребуется намного меньше корма, и на выходные дни должно хватить. Скиннер решил провести длительную серию экспериментов, чтобы проверить различные варианты системы подкреплений.

В одном таком исследовании Скиннер сравнил частоту реакции у животных, которые получали подкрепление при каждой реакции, с частотой реакций тех животных, которые получали подкрепление только по истечении некоторого интервала времени. Последнее условие получило название схемы подкрепления с фиксированным интервалом. Подкрепление могло выдаваться, например, один раз в минуту или каждые четыре минуты. Важным моментом в данном случае является то, что подопытное животное получало подкрепление только по истечении определенного отрезка времени. (Например, работа, когда деньги выплачиваются раз в неделю или раз в месяц, представляет собой схему подкрепления с фиксированным интервалом; работники получают заработную плату не за количество произведенной продукции - то есть не за количество обусловленных реакций - а за количество прошедших дней недели.) Исследование Скиннера показало, что чем короче интервал между подкреплениями, тем чаще животное проявляет обусловленную реакцию. И наоборот, по мере того, как увеличивается интервал между подкреплениями, частота реакции снижается.

Частота подкрепления также оказывает влияние на угасание условной реакции. Проявление условной реакции угасает с большей скоростью, если имело место непрерывное подкрепление, которое затем резко было прекращено, чем в том случае, когда подкрепление выдавалось с перерывами. Некоторые голуби демонстрировали до десяти тысяч реакций без подкрепления, если исходно у них был сформирован условный рефлекс па основе периодичного, прерывистого подкрепления.

Скиннер исследовал также схему подкрепления с фиксированной частотой. В этом случае подкрепление выдается не по истечении определенного отрезка времени, а после выполнения определенного количества условных реакций. Само поведение животного определяет, насколько часто будет выдаваться подкрепление. Например, требуется совершить десять или двадцать обусловленных ответных реакций, чтобы получить новое подкрепление. Животные, получающие поощрение по схеме с фиксированной частотой, реагируют намного интенсивнее, чем те, которые получают подкрепление по схеме с фиксированным интервалом. Ведь очевидно, что высокая частота реагирования при схеме с фиксированным интервалом не приводит к получению дополнительного подкрепления; животное может нажать на рычаг пять раз или пятьдесят, но подкрепление появится только тогда, когда истечет заданный отрезок времени.

Самые высокие показатели реагирования при схеме подкрепления с фиксированной частотой наблюдались и у крыс, и у голубей, и у людей. Пример тому: сдельная оплата труда, когда заработок работника на его рабочем месте зависит от количества произведенной продукции, а комиссионные зависят от количества продаж. Правда, такая схема подкрепления успешно работает только тогда, когда требуемый уровень обусловленной реакции не слишком высок (так, нормы дневной выработки должны быть реальными) и если ожидаемое подкрепление стоит затраченных усилий.

Вербальное поведение

Те звуки, которые человеческий организм производит в процессе речи, утверждал Скиннер, также являются формой поведения, а именно - вербальным поведением. Они представляют собой реакции, которые могут подкрепляться другими звуками речи или жестами точно так же, как нажатие крысой рычага подкрепляется получением пищи.

Для вербального поведения требуются два взаимодействующих человека - говорящий и слушающий. Говорящий определенным образом реагирует - это значит, что он произносит звук. Слушатель может управлять последующим поведением говорящего путем выражения подкрепления, отсутствия подкрепления или наказания - в зависимости от того, что было сказано.

Например, если всякий раз, как говорящий употребляет то или иное слово, слушатель улыбается, то он тем самым увеличивает вероятность того, что говорящий снова употребит это слово. Если слушатель реагирует на слово тем, что хмурит брови или отпускает язвительные замечания, то он тем самым увеличивает вероятность того, что говорящий в будущем будет избегать употребления этого слова.

Примеры такого процесса можно наблюдать в поведении родителей, когда их дети учатся говорить. Недопустимые слова или выражения, неправильное применение слов, плохое произношение вызывают реакцию, в корне отличающуюся от той, которой встречают вежливые фразы, правильное применение, чистое произношение. Таким образом ребенок обучается правильной речи - по крайней мере, на том уровне, на котором ею владеют родители или воспитатели.

Поскольку речь является поведением, она также подлежит подкреплению, прогнозированию и управлению, как любое другое поведение. Скиннер суммировал результаты своих исследований в книге «Вербальное поведение» (Verbal Behavior ) (Skinner. 1957).

Воздушная колыбель и обучающие машины

Применение «скиннеровского ящика» в психологических исследовательских лабораториях создало ему известность среди психологов, но воздушная колыбель - аппарат для автоматизации ухода за младенцами - сделал его знаменитым на всю страну.

Он описал изобретение воздушной колыбели в статье журнала для домохозяек. Когда он и его жена решили завести второго ребенка, она сказала ему, что уход за младенцем в первые два года жизни требует слишком много внимания и утомительного труда, и поэтому Скиннер изобрел автоматическое устройство, которое должно было избавить родителей от рутинной работы. Воздушные колыбели начали выпускаться промышленно, но, откровенно говоря, они не пользовались большим успехом.

Воздушная колыбель представляла собой «большое звуконепроницаемое помещение с кондиционированным воздухом, контролем температуры, защищенное против бактерий, в котором ребенок может спать или бодрствовать без пеленок, в одном только подгузнике. Это предоставляет полную свободу движений и относительную безопасность от простуды или перегревания» (Rice. 1968. P. 98). У дочери Скиннера не наблюдалось каких - либо вредных последствий пользования воздушной колыбелью.

Кроме того, Скиннер способствовал распространению обучающей машины, изобретенной еще в двадцатые годы психологом Сиднеем Пресси. К несчастью для Пресси, его изобретение намного опередило свое время и ни у кого не вызвало интереса.

Сложившаяся обстановка была такова, что если сначала обучающая машина не привлекла внимания, то спустя тридцать лет она вызвала настоящий взрыв энтузиазма (Benjamin. 1988Ь). В двадцатые годы, когда Пресси только что изобрел свою машину, он утверждал, что теперь можно будет учить школьников эффективнее и при меньшем количестве учителей. Однако в то время как раз наблюдался избыток учителей, а общественное мнение не было настроено на совершенствование учебного процесса. В пятидесятые годы, когда Скиннер представил аналогичное устройство, учителей не хватало, классы были переполнены, и общественность была обеспокоена и выражала настоятельные требования улучшить учебный процесс, чтобы появилась возможность конкурировать с русскими в области исследования космоса. Скиннер утверждал, что он ничего не знал об изобретении Пресси и разработал собственную обучающую машину, но он всегда отдавал должное своему предшественнику.

Скиннер начал разрабатывать свою обучающую машину после того, как посетил четвертый класс, в котором училась его дочь, и решил, что необходимо что - то сделать для улучшения учебного процесса. Он суммировал свой опыт в этой области в книге «Технология обучения» (The Technology of Teaching, 1968 г.). Обучающие машины широко применялись в пятидесятые и в начале шестидесятых годов, пока им на смену не пришли методы компьютерного обучения.

Уолден Два - Общество бихевиористов

Скиннер выдвинул программу контроля поведения - технологию поведения, в которой он предпринял попытку применить свои лабораторные открытия к жизни всего общества. В то время как Джон Б. Уотсон лишь в общих словах говорил об использовании условных рефлексов на пути к более здоровой жизни, Скиннер в подробностях обрисовал функционирование общества, в котором эта идея реализуется.

В 1948 году он опубликовал роман «Уолден Два», в котором описывал жизнь сельской общины, насчитывающей тысячу человек. Каждый аспект жизни в этой общине контролируется положительным подкреплением. Книга явилась плодом кризиса середины жизни, который Скиннер пережил в возрасте 41 года. Он смог преодолеть депрессию, вернувшись к своей юношеской мечте стать писателем. Захваченный личными и профессиональными конфликтами, он выразил свое отчаяние в книге, рассказывая о судьбе главного героя Т. Е. Фрейзера. «Многое в жизни Уолден Два взято из моей собственной жизни, - признавался Скиннер. - Я позволил Т. Е. Фрейзеру произнести то, на что сам не решался» (Skinner. 1979. P. 297–298).

Книга получила в прессе и похвальные, и отрицательные отзывы. До начала шестидесятых годов было продано всего лишь несколько тысяч экземпляров, но зато в 1990 году, в год смерти Скиннера, было продано около двух с половиной миллионов экземпляров (Bork. 1993).

Общество, изображенное в романе Скиннера, и само основополагающее предположение Скиннера о том, что люди по существу подобны машинам, отражает кульминацию длительного развития этого направления мысли, от Галилея и Ньютона до британских эмпириков, а затем и Уотсона. «Если мы собираемся использовать научные методы в человеческих делах, то должны признать, что поведение является детерминированным и подчиняется определенным законам, …что то, что делает человек, является результатом определенных условий, и если эти условия станут известны, то вполне можно предвидеть и до некоторой степени определить и действия» (Skinner. 1933. P. 6).

Механистический, аналитический и детерминистский подход, принятый в естественных науках, подкрепленный экспериментами Скиннера по формированию условных рефлексов, убедил представителей бихевиоральной психологии в том, что человеческое поведение можно контролировать, направлять, модифицировать и формировать при правильном использовании положительного подкрепления.

Модификация поведения

Программа Скиннера для общества, основанная на положительном подкреплении, существовала только теоретически, но зато контроль или модификация поведения людей или малых групп являлись широко распространенными практически. Модификация поведения посредством положительного подкрепления является одной из самых популярных методик в психиатрических клиниках, на фабриках, в школах, исправительных заведениях, где оно используется для того, чтобы изменить ненормальное или нежелательное поведение, сделать его более приемлемым или желательным. Модификация поведения действует на людей так же, как метод оперантного обусловливания, изменяющий поведение крыс или голубей путем подкрепления желательного поведения и не подкрепления нежелательного поведения.

Давайте представим себе ребенка, который устраивает истерики для того, чтобы получить пищу или привлечь к себе внимание. Если родители удовлетворяют требования ребенка, тем самым подкрепляя нежелательное поведение. При модификации поведения такие действия, как топанье ногами или крики, не должны получать подкрепления. Подкрепление полагается только за желательное и удовлетворительное поведение. Через некоторое время поведение ребенка изменится, поскольку демонстрация характера больше не будет приводить к получению требуемого результата.

Оперантное обусловливание и подкрепление применяются и на рабочих местах, где модификация поведения широко используется для снижения числа прогулов или злоупотребления больничными листами, а также для улучшения показателей работы и укрепления техники безопасности. Методы модификации поведения применяются также для обучения навыкам работы.

Программы модификации поведения доказали свою эффективность во время их использования в целях изменения поведения пациентов психиатрических клиник. За хорошее поведение пациенты получали вознаграждение в виде значков, которые можно было обменивать на определенные привилегии или блага; разрушительное или негативное поведение не вознаграждалось. Постепенно стали наблюдаться положительные изменения в поведении. В отличие от традиционных клинических методик то, что происходит в сознании пациента, здесь принималось во внимание не больше, чем в случае крыс из скиннсровского ящика. Все внимание было сосредоточено исключительно на внешнем поведении и положительном подкреплении.

Наказание не применялось. Люди не подвергались наказанию за то, что они вели себя не так, как требуется. Они только получали подкрепление или вознаграждение, когда их поведение менялось в положительном направлении. Скиннер верил, что положительное подкрепление для модификации поведения является более эффективным, чем наказание. Он подтвердил свою точку зрения значительным объемом экспериментальных исследований как на животных, так и на людях. (Скиннер писал, что в детстве отец никогда не наказывал его физически, а мать наказала только один раз: она вымыла его рот хозяйственным мылом за то, что он употребил нецензурные слова (Skinner. 1976). Правда, он не упомянул, оказало ли наказание какое - либо влияние на его поведение.)

Критика бихевиоризма Скиннера

Более всего возражений против бихевиоризма Скиннера вызвали его крайний позитивизм и отрицание всех теорий. Оппоненты Скинне - ра утверждают, что свести к нулю все теоретические построения невозможно. Поскольку детали эксперимента должны быть запланированы заранее, то уже это само по себе является свидетельством построения хотя бы простейшей теории. Отмечалось также, что принятие Скинне - ром базовых принципов формирования условных рефлексов в качестве основы для своей работы также является до некоторой степени теоретизированием.

Сложившаяся система взглядов придавала Скиннеру уверенности в экономических, социальных, политических и религиозных вопросах. В 1986 году он написал статью с многообещающим названием <Что неправильно в западном образе жизни?> (What is Vrong with Life in the Western World?) В этой статье он утверждал, что <поведение жителей Запада ухудшилось, но его можно улучшить посредством применения принципов, выведенных на основании экспериментального анализа поведения> (Skinner. 1986. P. 568). Критики обвинили Скинне - ра в том, что его готовность экстраполировать на основании опытных данных является несовместимым с его антитеоретическими установками и демонстрирует тот факт, что в своем стремлении представить собственный проект переустройства общества он выходит за рамки строго наблюдаемых данных.

Узкий диапазон исследований поведения в скиннеровских лабораториях (нажать на рычаг или клюнуть ключ) также не избежал критики. Противники теории Скиннера утверждали, что такой подход попросту игнорирует многие аспекты поведения. Утверждение Скиннера о том, что любое поведение является заученным, было оспорено его бывшим студентом, который обучил более шести тысяч животных 38 видов выступать в телевизионных программах, аттракционах и на ярмарках (Breland & Breland. 1961). Свиньи, куры, хомяки, дельфины, киты, коровы и прочие животные демонстрировали тенденцию к инстинктивному поведению. Это значит, что они замещали инстинктивным поведением то, которое получало подкрепление, даже если это инстинктивное поведение мешало им получить пищу. Таким образом, подкрепление оказалось не столь всемогущим, как утверждал Скиннер.

Позиция Скиннера в вопросах вербального поведения - в частности, его объяснение того, каким образом дети учатся говорить, - оспаривалось на том основании, что определенные виды поведения должны быть наследственными. Критики утверждали, что младенец не изучает язык слово за словом благодаря подкреплению, получаемому за каждое правильно произнесенное слово, - ребенок осваивает грамматические правила, необходимые для того, чтобы строить предложения. А вот потенциал для формирования таких правил, утверждают противники Скиннера, является наследственным, а не заученным (Chomsky.1959,1972).

Значение бихевиоризма Скиннера

Несмотря на эту критику, Скиннер оставался бесспорным лидером и героем бихевиоральпой психологии - по крайней мере, в течение трех десятилетий американская психология формировалась под влиянием работ Скиннера в большей степени, нежели работ какого - либо другого психолога.

В 1958 году Американская психологическая ассоциация вручила Скиннеру премию «За выдающийся вклад в развитие науки>, отмечая, что <мало кто из американских психологов оказал такое глубокое влияние на развитие психологии и воспитание многообещающих молодых ученых». В 1968 году Скиннер получил национальную медаль, что является высшей наградой, которой правительство Соединенных Штатов удостаивает за вклад в науку. В 1971 году Американский психологический фонд представил Скиннера к награждению золотой медалью; его фотография появилась на обложке журнала «Тайм». А в 1990 году он был отмечен занесением на доску почета Американской психологической ассоциации за большой вклад в психологию.

Очень важно понять, что основной целью Скиннера являлось улучшение жизни отдельных людей и общества в целом. Несмотря на механистическую природу его системы, он по сути был гуманистом. Это качество ярко проявилось в его усилиях модифицировать поведение людей в реальных условиях семей, школ, предприятий и больниц. Он надеялся, что его технология поведения облегчит страдания людей, и потому чувствовал все возрастающее разочарование, понимая, что, несмотря на всю свою популярность и влияние, его система не получает широкого распространения.

К старости Скиннер стал более пессимистически настроен в отношении надежд, что наука способна на своевременное преобразование общества. Его отчаяние по поводу будущею мира росло. (Bjork. 1993. P. 226.)

Не подлежит сомнению тот факт, что радикальный бихевиоризм Скиннера завоевал и до сих пор удерживает за собой сильные позиции в психологии. «Журнал экспериментального анализа поведения» и «Журнал прикладного анализа поведения» (Journal of the Experimental Analysis of Behavior и Journal Applied Behavior Analysis ) продолжают процветать, равно как и Отделение экспериментального анализа поведения при Американской психологической ассоциации. Применение принципов Скиннера - в особенности модификации поведения - остается популярным, а результаты этой деятельности подтверждают правильность подхода Скиннера. По всем меркам профессионального и общественного признания бихевиоризм Скиннера определенно затмил все прочие виды бихевиоральной психологии.

Из книги Психология. Люди, концепции, эксперименты автора Клейнман Пол

Фредерик Скиннер (1904–1990) Все дело в последствиях Фредерик Скиннер родился 20 марта 1904 года в Саскуэханне, в семье адвоката и домохозяйки. Его детство прошло в теплой, стабильной атмосфере; мальчик много занимался творчеством и постоянно что-то изобретал, что оказало

Из книги Раненый целитель: Контрперенос в практике юнгианского анализа автора Сэджвик Дэвид

В 1990-е годы Работы некоторых других авторов, особенно Самуэлса (1985, 1989, 1993) и Штайнберга (1989) переносят этот обзор теорий контрпереноса в 1990-е. Подобно другим юнгианцам, упомянутым здесь, Самуэлс (1989) представляет нам некоторые новые способы рассмотрения образного контекста

Из книги Теории личности автора Хьелл Ларри

Б. Ф. Скиннер: теория оперантного научения Биографический очерк Беррес Фредерик Скиннер (Burrhus Frederic Skinner) родился в 1904 году в Саскуэханне, штат Пенсильвания. Атмосфера в его семье была теплой и непринужденной, учение уважалось, дисциплина была строгой, а награды давались,

Из книги 175 способов расширить границы сознания автора Нестор Джеймс

Релиз-техника Скиннер Это терапевтическая техника танца, разработанная в 1960-х годах Джоан Скиннер, чтобы восстановить нашу связь с грацией животных, присущие им чувство равновесия, координацию и ловкость, с которыми мы все родились, но которые утратили с возрастом,

Из книги Из Ада в Рай [Избранные лекции по психотерапии (учебное пособие)] автора Литвак Михаил Ефимович

ЛЕКЦИЯ 6. Поведенческая психотерапия: Б. Ф. Скиннер Методы психотерапии основаны на теориях научения. На начальной стадии развития поведенческой психотерапии основной теоретической моделью явилось учение И.П.Павлова об условных рефлексах. Бихевиористы рассматривают

Из книги Век психологии: имена и судьбы автора Степанов Сергей Сергеевич

Из книги Психология в лицах автора Степанов Сергей Сергеевич

Д. Б. Эльконин (1904–1984) …Я терпеть не могу никакой пошлятины в науке, я терпеть не могу никакой необоснованности, нелогичности, я терпеть не могу ничего такого, что привносится в науку кроме ее собственной внутренней логики. Д. Б. Эльконин В одном популярном кинофильме

Из книги Социально-психологические проблемы университетской интеллигенции во времена реформ. Взгляд преподавателя автора Дружилов Сергей Александрович

«Лихие» 1990-е годы После 1991 г. государство «ушло» из многих секторов экономики, оставив на произвол судьбы и почти всю сферу высшего образования. Резко сократилось финансирование вузов. Да и не только вузов. Рухнуло все – экономика, финансовая сфера, остановилась работа

Женский портал - Vera21

скиннер. технология поведения1. Б. ф. скиннер технология поведения Скиннер выделяет четыре режима подкрепления

Теория оперантного обусловливания Берреса Ф. Скиннера (1904-1990)

Теория оперантного научения Б.Ф. Скиннера

Теория оперантного научения Б.Ф. Скиннера

Б. Ф. Скиннер (1904–1990)

Теория оперантного обусловливания Берреса Ф. Скиннера (1904-1990)

Теория оперантного научения Б.Ф. Скиннера

Теория оперантного научения Б.Ф. Скиннера

Б. Ф. Скиннер (1904–1990)

Похожие материалы: