Целенаправленный бихевиоризм

Основные положения учения Толмена представлены в его работе «Целенаправленное поведение у животных и человека» (1932г.). Его система целенаправленного бихевиоризма* может на первый взгляд показаться любопытной смесью двух противоречащих друг другу понятий: цель и поведение.

Целенаправленность поведения, писал Толмен, можно определить в терминах объективного бихевиоризма, без ссылок на интроспекцию или предположений о том, что организм «чувствует» в связи с тем или иным переживанием. Для него было совершенно очевидно, что любое поведение направлено на достижение определенной цели. Например, кошка старается выбраться из «проблемного ящика», крыса осваивается в лабиринте, а ребенок учится играть на фортепиано.

Как говорил сам Толмен, поведение «пахнет целью». Любое поведение направлено на достижение некоторой цели, на освоение некоторых средств. Крыса неоднократно и настойчиво проходит лабиринт, всякий раз делая все меньше ошибок, чтобы быстрее добраться до выхода. Иначе говоря, крыса учится, и сам факт обучения - для крысы или для человека - является объективным поведенческим свидетельством наличия цели. Отметим, что Толмен имеет дело только с реакциями организмов. Все его измерения проводились в терминах изменений в ответном поведении, как функции научения. И эти измерения предоставляют объективную информацию.

Бихевиоризм Уотсона с большой легкостью подвергал критике приписывание какой-либо цели любому виду поведения, поскольку целенаправленность поведения подразумевает допущение о наличии сознания. Толмен отвечал на это, что для него нет разницы, обладает организм сознанием или не обладает. Переживания сознания, связанные с целенаправленным поведением, если они даже и имеют место, не оказывают никакого влияния на поведенческие реакции организма. Толмен занимался исключительно явно выраженными реакциями.

Промежуточные переменные

Как бихевиорист, Толмен считал, что причины поведения включают пять основных независимых переменных: стимулы окружающей среды, психологические побуждения, наследственность, предшествующее обучение и возраст. Поведение является функцией всех этих переменных, что выражается математическим уравнением.

Между этими наблюдаемыми независимыми переменными и результирующим ответным поведением (зависимой наблюдаемой переменной) Толмен ввел набор ненаблюдаемых факторов, которые назвал промежуточными переменными*. Эти промежуточные переменные фактически являются детерминантой поведения. Они представляют собой те внутренние процессы, которые связывают стимулирующую ситуацию с наблюдаемой реакцией. Формула бихевиоризма S-R (стимул-реакция) теперь должна читаться как S-О-R. Промежуточными переменными является все, что связано с О, то есть с организмом, и формирует данную поведенческую реакцию на данное раздражение.

Поскольку эти промежуточные переменные не подлежат объективному наблюдению, то они не представляют никакой практической пользы для психологии, если только их не удается связать с экспериментальными (независимыми) переменными и с поведенческими (зависимыми) переменными.

Классическим примером промежуточной переменной является голод, который невозможно увидеть у подопытного человека или животного. И тем не менее, голод можно вполне объективно и точно увязать с экспериментальными переменными - например, с длительностью того отрезка времени, на протяжении которого организм не получал пищу. Кроме того, его можно увязать и с объективной реакцией или с переменной поведения - например, с количеством съеденной пищи или со скоростью ее поглощения. Таким образом, ненаблюдаемый фактор вмешательства - голод - может получить точную эмпирическую оценку и следовательно становится доступным для количественного измерения и экспериментальных манипуляций.

Путем определения независимых и зависимых переменных, каковыми являются наблюдаемые события, Толмен получил возможность составить операциональные описания ненаблюдаемых, внутренних состояний. Сначала он называл свой подход «оперантным бихевиоризмом», прежде чем выбрать термин «промежуточные переменные».

Промежуточные переменные оказались весьма полезными для разработки теории поведения, постольку они были эмпирически связаны с экспериментальными и поведенческими переменными. Однако для того, чтобы сделать этот подход всеобъемлющим, потребовался такой громадный объем работы, что Толмен в конце концов оставил всякую надежду «составить полное описание хотя бы одной промежуточной переменной».

Теория научения

Научение играло важнейшую роль в целенаправленном бихевиоризме Толмена. Он отвергал закон эффекта Торндайка, утверждая, что вознаграждение или поощрение оказывает слабое воздействие на научение. Взамен этого Толмен предложил когнитивную теорию научения, предполагая, что повторяющееся выполнение одного и того же задания усиливает создаваемые связи между факторами окружающей среды и ожиданиями организма. Таким путем организм познает окружающий его мир. Толмен называл эти создаваемые научением связи Гештальт - знаками, которые вырабатываются в ходе многократного выполнения какого-либо действия.

Давайте запомним эти идеи Толмена и попробуем понаблюдать за голодной крысой в лабиринте. Крыса бегает по лабиринту, исследуя иногда правильные, а иногда неправильные ходы или даже тупики. Наконец крыса находит еду. При последующих прохождениях лабиринта цель (поиск пищи) придает поведению крысы целенаправленность. С каждой точкой разветвления связываются некоторые ожидания. Крыса приходит к пониманию того, что определенные признаки, ассоциирующиеся с точкой разветвления, наводят или нс наводят на то место, где находится пища.

Если ожидания крысы оправдываются и она действительно находит пищу, то знак гештальта (то есть признак, ассоциирующийся с некоторой точкой выбора) получает подкрепление. Таким образом животное вырабатывает целую сеть гештальт - знаков по всем точкам выбора в лабиринте. Толмен назвал это когнитивной картой. Эта схема представляет собой то. что выучило животное, а именно когнитивную карту лабиринта, а вовсе не набор некоторых моторных навыков. В некотором смысле крыса обретает всеобъемлющее знание своего лабиринта или иной окружающей ее среды. В се мозге вырабатывается что-то вроде полевой карты, которая позволяет ей перемещаться от точки к точке, не ограничиваясь фиксированным набором заученных телодвижений.

В классическом эксперименте, который подтвердил теорию Тол-мена, выяснялось, действительно ли крыса в лабиринте изучает его когнитивную карту или же просто запоминает набор моторных реакций. Был использован лабиринт крестообразной формы. Крысы одной группы всегда находили пищу на одном и том же месте, даже если для того, чтобы добраться до пищи, им при разных точках входа приходилось иногда поворачивать нс направо, а налево. Моторные реакции отличались, но пища оставалась на том же самом месте.

Крысы второй группы должны были всегда повторять одни и те же движения, но пища всякий раз находилась в другом месте. Например, начиная путь с одного конца крестообразного лабиринта, крысы находили пищу, только повернув в точке выбора направо; если же крысы входили в лабиринт с противоположной стороны, то для того, чтобы найти пищу, им все равно надо было повернуть направо.

Результаты эксперимента показали, что крысы из первой группы, то есть те, которые изучили место действия, ориентировались гораздо лучше, чем крысы из второй группы, которые заучивали реакции. Тол-мен пришел к выводу, что аналогичное явление наблюдается и у тех людей, которые хорошо знают свои окрестности или город. Они могут пройти из одной точки в другую различными маршрутами, поскольку в их мозге сформирована когнитивная карта местности.

Другой эксперимент исследовал латентное научение* - то есть такое научение, которое невозможно наблюдать в то время, когда оно фактически происходит. Голодную крысу поместили в лабиринт и предоставили ей возможность свободно бродить по нему. Сначала в лабиринте не было никакой пищи. Сможет ли крыса обучиться чему-либо при отсутствии подкрепления? После нескольких неподкрепленных попыток крысе дали возможность найти пищу. После этого скорость прохождения крысой лабиринта резко возросла, что показало наличие некоторого научения в период отсутствия подкрепления. Показатели этой крысы очень быстро достигли такого же уровня, что и у крыс, получавших подкрепление при каждой попытке.

Комментарии

Толмен оказал огромное влияние на психологию, особенно в области теории научения, а его работы получили признание как провозвестники когнитивного движения в современной психологии. Кроме того, он подтолкнул исследования различных направлений и ввел концепцию промежуточных переменных. Поскольку промежуточные переменные являются способом операционного описания ненаблюдаемых внутренних состояний, таких как голод, то они смогли придать этим состояниям научное значение. Промежуточные переменные стали необходимым средством обращения с гипотетическими конструкциями и были широко использованы необихевиористами Халлом и Скиннером.

Другим важным вкладом Толмена в науку явилось использование им крысы как наиболее адекватного субъекта для психологических исследований. Тем не менее в начале своей карьеры Толмен относился к крысам без всякого энтузиазма. «Не люблю их, - говорил он своему другу. - У меня от них мурашки по коже...».

Однако к 1945 году он изменил свое отношение. Он писал: «Отметим, что крысы живут в клетках. Они не напиваются в стельку в ночь накануне эксперимента. Они не истребляют друг друга в войнах: они не изобретают машин для разрушения, а если бы даже они это сделали, то уж, конечно, нс оказались бы столь беспомощными в деле контроля за этими машинами; они не ввязываются в расовые или классовые конфликты: они избегают политики, экономики и статей по психологии. Они восхитительные, чистые и приятные существа».

Б. Ф. Скиннер (1904-1990)

Скиннер в лаборатории. Классический ящик Скиннера позже был оснащен различными электронными приборами.

 Приспособление для исследования закономерностей оперантной активности живых существ (первоначально - лаболаторных крыс, затем - голубей, разработанное Б.Ф.Скиннером.

Представляет собой пустой ящик, оснащенный педалью, нажатие на которой приводит к подаче кусочка пищи или иному подкреплению.

Самой влиятельной фигурой в психологии в течение нескольких десятилетий являлся Б. Ф. Скиннер. Один из историков психологии назвал его «без сомнения, наиболее знаменитым американским психологом в мире». Когда в 1990 году Скиннер умер, редактор журнала «Американский психолог» писал о нем как об «одном из гигантов нашей области науки», который «оставил неизгладимый след в психологии».

А в некрологе «Журнала по истории бихсвиоральных наук» о нем писали как о «ведущей фигуре в бихевиоризме нынешнего века».

Начиная с пятидесятых годов и в течение многих лет Скиннер являлся ведущим бихевиористом Соединенных Штатов Америки и привлекал огромное количество верных и восторженных продолжателей и сторонников. Он разработал программу бихевиорального контроля общества, изобрел автоматизированный детский манеж и стал одним из главных вдохновителей и создателей методик модификации поведения и обучающих машин. Он написал роман «Уолден Два» (Walden Two), который и через пятьдесят после выхода в свет оставался популярным. В 1971 году его книга «По ту сторону свободы и достоинства» (Beyond Freedom and Dignity) стала национальным бестселлером, а сам Скиннер – «самым популярным персонажем различных национальных и городских ток-шоу». Он стал знаменитостью: его прекрасно знала и широкая общественность, и коллеги.

Страницы жизни

Скиннер родился в городке Саскуеханна, штат Пенсильвания, где и жил до поступления в колледж. Согласно его собственным воспоминаниям, его детство прошло в обстановке любви и спокойствия. Он учился в той же самой школе, где когда-то учились его родители; в выпускном классе Скиннера было всего семеро учеников. Он любил свою школу и по утрам всегда приходил раньше всех. В детстве и отрочестве он увлекался созданием самых разных предметов: плотов, тележек, каруселей, пращей и рогаток, моделей самолетов, и даже паровой пушки, которая стреляла поверх крыши соседского дома картофелинами и морковками. Несколько лет он потратил на то, чтобы изобрести вечный двигатель. Он также много читал о поведении животных и держал дома целый зоопарк, состоявший из черепах, змей, ящериц, жаб и бурундуков. Как-то раз на ярмарке он увидел дрессированных голубей: много лет спустя он сам научил голубей разным трюкам.

Психологическая система Скиннера отражает опыт его жизни в детстве и юности. Согласно его собственным взглядам, жизнь человека является плодом прошлых подкреплений. Он утверждал, что его собственная жизнь была настолько предопределенной, упорядоченной и правильной, насколько его система предписывает быть любой человеческой жизни. Он полагал, что все аспекты человеческой жизни можно проследить до самых их истоков.

Скиннер поступил к Гамильтон колледж в Нью-Йорке, но там ему не понравилось. Бунтарство Скиннера, в частности, проявлялось в розыгрышах, а также в том, что он шокировал студенческое сообщество и открыто высказывал критические замечания о факультете и об администрации. Его непослушание прекратилось только в день выпуска, когда перед началом торжественной церемонии президент колледжа предупредил Скиннера и его друзей, что если они не успокоятся, им не выдадут дипломов.

Скиннер все-таки успешно закончил колледж со степенью по английскому языку, правом принадлежности к обществу «Фи Бета Каппа» и стремлением стать писателем. На летнем писательском семинаре поэт Роберт Фрост с похвалой отозвался о стихотворениях и рассказах Скиннера. В течение двух лет после выпуска из колледжа Скиннер занимался литературной деятельностью, а затем решил, что ему «нечего сказать». Его неудача на писательском поприще настолько обескуражила его, что он даже стал подумывать о консультациях психиатра. Он считал себя неудачником. Чувство собственной значимости было жестоко поколеблено.

Кроме того, он разочаровался в любви. Его отвергли по меньшей мере полдюжины молодых женщин, что доставляло ему, по его собственному выражению, сильную физическую боль. Один раз он был настолько потрясен, что выжег на своей руке инициалы возлюбленной. След от ожога остался на многие годы. Биограф отмечает, что «любовные интересы» Скиннера «всегда были несколько подавлены раздвоением чувств и разочарованием. Правда, вскоре Скиннер приобрел репутацию ветреника».

Прочитав об экспериментах Уотсона и Павлова по формированию условных рефлексов, Скиннер круто повернулся от литературных аспектов человеческого поведения к научным. В 1928 году он поступил в аспирантуру Гарвардского университета по психологии - несмотря на то, что до этого ни разу не прослушал курса психологии.  По его собственным словам, он поступил в аспирантуру «не потому, что вдруг почувствовал непреодолимую тягу к психологии, а только из-за того, чтобы избавиться от невыносимой альтернативы». Было иль не было у него непреодолимой тяги к психологии, но через три года он получил ученую степень доктора философии. По завершении научной работы, после защиты докторской диссертации, он преподавал в университете штата Миннесота (1936-1945) и университете штата Индиана (1945-1974), после чего вернулся в Гарвард.

Тема его диссертации относится к положению, которому Скиннер неуклонно следовал в течение всей своей карьеры. Он предположил, что рефлекс представляет собой корреляцию между стимулом и реакцией, и ничего более. В его книге 1938 года «Поведение организмов» описываются основные положения этой системы.  Любопытно, что за первые восемь лет после публикации было продано всего лишь 500 экземпляров книги, и она получила в основном отрицательные рецензии, а пятьдесят лет спустя об этой книге говорили, что она «является одной из немногих книг, которые изменили облик современной психологии».

«В шестидесятые годы началось восхождение звезды Скинпера, отчасти по причине принятия его идей в области образования, отчасти - благодаря растущему влиянию идей Скиннера в области клинической модификации поведения». Столь широкая применимость идей Скиннера соответствовала его устремлениям, поскольку он испытывал глубокий интерес к проблемам реальной жизни. Его более поздняя работа «Наука и человеческое поведение» стала основным учебником по бихевиоральной психологии.

Скиннер продолжал плодотворно работать до самой своей смерти в возрасте 86 лет - причем трудился он с тем же энтузиазмом, который проявлял и шестьдесят лет назад. В подвале своего дома он оборудовал персональный «скиннеровский ящик» - контролируемую среду, которая давала положительное подкрепление. Он спал там в большой желтой пластиковой коробке, в которой как раз помещался матрас, несколько полок с книгами, а также маленький телевизор. Каждый вечер он ложился спать в десять часов, спал три часа, час работал, затем спал еще три часа и вставал в пять часов утра, чтобы отработать еще три часа. Утром он отправлялся в свой кабинет в университете и там снова работал, а во второй половине дня давал себе положительное подкрепление, слушая музыку. Кроме того, огромное положительное влияние на него оказывал процесс написания статей. «Мне очень нравится писать, и было бы очень жаль, если бы когда-нибудь мне пришлось от этого отказаться».

В возрасте 78лет Скиннер написал статью под названием «Как сохранить интеллект в старости», в которой он ссылался на свой собственный опыт.  В этой статье говорится о том, как полезно в старости упражнять мозг по несколько часов в день, при этом обязательно давая перерывы между всплесками активности - для того, чтобы поддержать слабеющую память и не допустить снижения интеллектуальных способностей.

В 1989 году у Скиннера обнаружили лейкемию. Жить ему оставалось не более двух месяцев. В интервью по радио он говорил о своих чувствах:

Я не религиозный человек, и потому меня не беспокоит, что произойдет со мной после смерти. И когда мне сказали, что у меня такая болезнь и что через несколько месяцев я умру, я не испытал никаких эмоций. Ни паники, ни страха, ни тревоги. Вообще ничего. Единственное, что тронуло меня и от чего мои глаза увлажнились, была мысль о том, как я сообщу об этом жене и дочерям. Видите ли, когда умираешь, ты невольно ранишь тех, кто тебя любит. И ничего с этим не поделаешь... Я прожил хорошую жизнь. С моей стороны было бы довольно глупо в каком-либо смысле на нее жаловаться. А потому я радостно проживу оставшиеся мне месяцы - так же, как я всегда радовался жизни.

За восемь дней до смерти, сильно ослабевший, Скиннер представил свою статью на заседание Американской психологической ассоциации в Бостоне. Она была посвящена наблюдаемым и ненаблюдаемым стимулам, и, соответственно, респондентному и оперантному поведениям.

Бихевиоризм Скиннера

Оперантное поведение возникает без воздействия каких-либо внешних наблюдаемых раздражителей. Реакция организма кажется спонтанной в том смысле, что внешне она никак не связана с каким-либо наблюдаемым раздражителем. Это вовсе не означает, что стимула, вызывающего ту или иную реакцию, не существует; это значит, что при возникновении данной реакции ни один стимул не является наблюдаемым. С экспериментальной же точки зрения, если стимул отсутствует, то это значит, что он нс применялся, а потому и не наблюдается.

Другим различием между респондентным и оперантным поведением является то, что оперантное поведение воздействует на окружающую организм среду, в то время как респондентное поведение этого не делает. Подопытная собака в лаборатории Павлова, закованная в сбрую, не может сделать ничего иного, как только реагировать (например, пускать слюну), когда экспериментатор предлагает ей какие-либо стимулы. Собака сама по себе ничего не может сделать, чтобы достать стимул (пищу).

Оперантное поведение крысы в коробке Скиннера, напротив, является инструментальным в том смысле, что крыса достигает своего стимула (пищи). Когда крыса нажимает на рычаг, она получает пищу; а если не нажимает на рычаг, то не получает пищи. Таким образом крыса воздействует на окружающую среду. (Скиннер очень не любил термин «скиннеровский ящик», впервые введенный Халлом в 1933 году. Он сам называл это оборудование аппаратом оперантного формирования условных рефлексов. Однако термин «скиннеровский ящик» стал столь популярным, что вошел во все справочники и в настоящее время является в психологии общепринятым.)

Скиннер считал, что оперантное поведение характерно для повседневного научения. Поскольку поведение, как правило, носит оперантный характер, то наиболее эффективным подходом к науке о поведении является изучение обусловливания и угасания оперантпого поведения.

Классическая экспериментальная демонстрация заключалась в нажатии на рычаг в скиннеровском ящике. В этом эксперименте крыса, лишенная пищи, помещалась в ящик и получала полную возможность исследовать его. В ходе исследований она неизбежно должна была задеть рычажок, который приводил в действие механизм, выдвигающий полочку с пищей. После получения нескольких порций пищи, которые должны были служить подкреплением, у крысы довольно быстро формировался условный рефлекс. Обратите внимание, что поведение крысы (нажатие на рычаг) оказывает воздействие па окружающую среду и является инструментом приобретения пищи. Зависимая переменная в этом эксперименте проста и понятна: это скорость реакции.

На основании этого эксперимента Скиннер сформулировал свой закон приобретения*, который гласит, что сила оперантного поведения возрастает, если поведение сопровождается подкрепляющим стимулом. Несмотря на то, что для формирования быстрой реакции нажатия на рычажок требуется практика, ключевым параметром все-таки является подкрепление. Практика сама по себе ничего не дает: она только предоставляет возможность возникновения дополнительного подкрепления.

Закон приобретения Скиннера отличается от положений о научении у Торндайка и у Халла. Скиннер вообще не касался таких последствий подкрепления, как боль - приятное ощущение или удовольствие-неудовлетворение, как это делал Торндайк. Скиннер так же не пытался интерпретировать подкрепление в терминах снижения воздействия побуждений, как это делал Кларк Халл. Системы Торндайка и Халла были объясняющими; система Скиннера является строго описательной.

Скиннер и его последователи провели огромную исследовательскую работу по проблемам научения - таким, как роль наказания в приобретении навыков, воздействие различных систем подкрепления, мера угасания оперантного обусловливания, наличие вторичного подкрепления и т. д.

Кроме крыс они работали и с другими подопытными животными, и с людьми, используя в качестве основного подхода тот же самый принцип <скиннеровского ящика>. Если в качестве подопытных животных использовались голуби, то они должны были клюнуть в определенную точку или пятно; подкреплением являлась пища. Оперантное поведение людей включало такие аспекты, как решение задач, подкрепленное похвалой или осознанием того, что был дан правильный ответ.

Скиннер сообщал, что в качестве подкрепления для своей трехлетней дочери он использовал поглаживание по спине. Однако этот эксперимент обернулся неожиданным образом. Однажды он укладывал девочку спать, гладил ее по спинке и вдруг решил проверить, насколько это является поощряющим подкреплением. «Я подождал, - написал Скиннер, - чтобы она подняла ногу, и тогда погладил ее. Почти сразу же она снова подняла ногу, и я снова погладил ее. Она засмеялась. "Ты над чем смеешься?" - спросил я, и она ответила: "Стоит мне поднять ногу, как ты начинаешь меня гладить!"».

Схема подкрепления

Уже первые исследования в «скиннеровском ящике» с нажатием рычага продемонстрировали значение подкрепления для оперантного поведения. В этой ситуации поведение крысы при каждом нажатии на рычаг получало подкрепление. То есть всякий раз, выполнив правильное действие, крыса получала пищу. Скиннер отмечал, что хотя в реальной жизни подкрепление далеко не всегда бывает последовательным или непрерывным, тем не менее, научение все-таки происходит и поведение сохраняется, даже если подкрепление было случайным или редким.

Не всегда, отправляясь кататься на коньках или на лыжах, мы попадаем на хороший лед или снег... Не всегда, приходя в ресторан, мы получаем хорошую пишу. потому что повара непредсказуемы. Звоня друзьям по телефону. мы не всегда получаем ответ, потому что друзья могут отсутствовать. ...Подкрепляющие характеристики деятельности и обучения почти всегда являются прерывистыми. так как просто не имеет смысла контролировать подкреплением каждую реакцию.

Даже если вы проводите исследования постоянно, вы не при каждом эксперименте получаете реакцию А. На работе вас не каждый день хвалят и не каждый день повышают заработную плату. Каким образом на поведении сказывается такое непостоянное подкрепление? Является ли та или иной режим подкрепления* лучшим, чем остальные, с точки зрения ее воздействия на поведение? Скиннер и его коллеги посвятили годы исследованию этих вопросов.

Потребность в этих исследованиях возникла не из-за чисто научного любопытства, но на основе практической целесообразности - что, кстати, иллюстрирует тот факт, что наука нередко существенно отличается от той идеализированной модели, которая представляется в некоторых учебниках. Как-то раз в субботу вечером Скиннер обнаружил, что у него почти закончился запас корма. В то время (тридцатые годы) еще нельзя было купить корм у специальных компаний по снабжению исследовательских лабораторий; экспериментатор должен был делать шарики вручную, что являлось достаточно длительным и трудоемким процессом.

Вместо того, чтобы потратить свои выходные на изготовление кормовых шариков, Скиннер задал себе вопрос: что произойдет, если он будет давать подкрепление своим крысам один раз в минуту, независимо от того, какое будет количество ответных реакций? При таком подходе ему потребуется намного меньше корма, и на выходные дни должно хватить. Скиннер решил провести длительную серию экспериментов, чтобы проверить различные варианты системы подкреплений.

В одном таком исследовании Скиннер сравнил частоту реакции у животных, которые получали подкрепление при каждой реакции, с частотой реакций тех животных, которые получали подкрепление только по истечении некоторого интервала времени. Последнее условие получило название схемы подкрепления с фиксированным интервалом. Подкрепление могло выдаваться, например, один раз в минуту или каждые четыре минуты. Важным моментом в данном случае является то, что подопытное животное получало подкрепление только по истечении определенного отрезка времени. (Например, работа, когда деньги выплачиваются раз в неделю или раз в месяц, представляет собой схему подкрепления с фиксированным интервалом; работники получают заработную плату не за количество произведенной продукции - то есть не за количество обусловленных реакций - а за количество прошедших дней недели.) Исследование Скиннера показало, что чем короче интервал между подкреплениями, тем чаще животное проявляет обусловленную реакцию. И наоборот, по мере того, как увеличивается интервал между подкреплениями, частота реакции снижается.

Частота подкрепления также оказывает влияние на угасание условной реакции. Проявление условной реакции угасает с большей скоростью, если имело место непрерывное подкрепление, которое затем резко было прекращено, чем в том случае, когда подкрепление выдавалось с перерывами. Некоторые голуби демонстрировали до десяти тысяч реакций без подкрепления, если исходно у них был сформирован условный рефлекс па основе периодичного, прерывистого подкрепления.

Скиннер исследовал также схему подкрепления с фиксированной частотой. В этом случае подкрепление выдается не по истечении определенного отрезка времени, а после выполнения определенного количества условных реакций. Само поведение животного определяет, насколько часто будет выдаваться подкрепление. Например, требуется совершить десять или двадцать обусловленных ответных реакций, чтобы получить новое подкрепление. Животные, получающие поощрение по схеме с фиксированной частотой, реагируют намного интенсивнее, чем те, которые получают подкрепление по схеме с фиксированным интервалом. Ведь очевидно, что высокая частота реагирования при схеме с фиксированным интервалом не приводит к получению дополнительного подкрепления; животное может нажать на рычаг пять раз или пятьдесят, но подкрепление появится только тогда, когда истечет заданный отрезок времени.

Самые высокие показатели реагирования при схеме подкрепления с фиксированной частотой наблюдались и у крыс, и у голубей, и у людей. Пример тому: сдельная оплата труда, когда заработок работника на его рабочем месте зависит от количества произведенной продукции, а комиссионные зависят от количества продаж. Правда, такая схема подкрепления успешно работает только тогда, когда требуемый уровень обусловленной реакции не слишком высок (так, нормы дневной выработки должны быть реальными) и если ожидаемое подкрепление стоит затраченных усилий.