Подкрепление. Чтобы можно было отличить научение от угасания, следу­ет дать более точное

Чтобы можно было отличить научение от угасания, следу­ет дать более точное определение слова «упражнение», ис­пользованного в рабочем определении научения. Неподкреп­ленное упражнение приводит к угасанию, в то время как под­крепленное — способствует научению. Согласно эмпирическому определению, подкрепление — это любое событие, которое, будучи правильно использованным, повышает вероятность по­явления определенной реакции в похожих условиях. Сущест­вуют некоторые терминологические разногласия. Скиннер вы­деляет положительные и отрицательные подкрепляющие раз­дражители — в зависимости от того, подкрепляет ли он на­ступление события или предотвращает его. Пища — это поло­жительный подкрепляющий раздражитель, боль — отрицатель­ный. Отрицательное подкрепление отличается от наказания,

________ Глава 2. Принципы обусловливания рефлексов и научения

которое Скиннер считает лишением положительного подкреп­ляющего раздражителя или действием отрицательного. Одна­ко некоторые авторы считают наказание отрицательным под­креплением. Наказание не обладает таким же эффектом, как и отсутствие подкрепления, поскольку приводит скорее к вре­менному подавлению, а не к угасанию.

В результате исследований были установлены количествен­ные связи между укреплением и действием. По мере роста количества положительного или отрицательного укрепления навыки действия возрастают согласно логарифмической функ­ции. При классическом обусловливании оптимальные резуль­таты были получены тогда, когда УР действовал за 0,5 секун­ды до БР. Если этот интервал больше или меньше, обусловли­вание рефлекса ослабевает, а в результате действия БР перед УР (обратная выработка) почти не происходит научения. Спо­радическое подкрепление приводит к большей устойчивости к угасанию, чем регулярное подкрепление. Инструментальные реакции, более близкие к подкреплению во времени или про­странстве, вырабатываются быстрее, чем более отдаленные. Это явление находит отражение в термине «градиент подкрепле­ния». Представляется, что степень эффективности отдален­ного подкрепления является функцией уровня развития, на котором находится данный организм: перспектива награды обычно действует намного лучше на старших детей и взрос­лых, чем на маленьких детей и животных, нуждающихся в не­медленной и ощутимой награде. С градиентом подкрепления связано открытие Моурера: поведение, после которого следу­ет небольшая, но немедленная награда, а через некоторое вре­мя — серьезное наказание, имеет тенденцию к сохранению, в то время как небольшое, но немедленное наказание может при­вести к исчезновению поведения, даже если затем следует серь­езное подкрепление (Mowrer, 1950). Мы привели рабочее опре­деление подкрепления в связи с трудностями при формули­ровке теоретического определения. Против него выдвигаются обвинения в цикличности, но Скиннер обращает внимание на то, что подкрепляющий раздражитель увеличивает вероятность повторения определенной поведенческой реакции в будущем. До тех пор пока мы избегаем приписывать подкреплению зна­чения причины, эмпирическое определение избавлено от цик­личности. Было доказано (Meehl, 1950), что это определение лишено тавтологического характера, поскольку утверждение,

Методы поведенческой терапии_________________________________

что определенное событие вызовет подкрепляющий эффект в некой ситуации, обычно позволяет предвидеть, что оно будет иметь такой же эффект при совершенно других обстоятельст­вах. Утверждается также, будто из концепции подкрепления следует, что причинный фактор действует после появления со­бытия, которое он должен вызывать. Здесь налицо непонима­ние употребления понятия. Это обвинение беспочвенно, по­скольку подкреплению не придают значения причины, отмеча­ется лишь его влияние на вероятность повеления в будущем. Утверждение, что подкрепление повышает вероятность возоб­новления поведения, которое ему предшествовало, аналогич­но утверждению, что сотрясение мозга уменьшает вероятность повторения повеления, которое ему предшествовало (потеря памяти). В связи с явлениями подкрепления и потери памяти появилась проблема их нейрофизиологического фона и воз­никла гипотеза, что подкрепление и сотрясение мозга проис­ходят во времени, когда возможно усиление или расслабление нервной проводимости, стимулированного предшествующим по­ведением. В любом случае проблема относится к физиологов, а не к логике. Еще не ясно, почему подкрепляющий раздражи­тель подкрепляет, хотя было много попыток объяснить это яв­ление. Психологические теории колеблются между «психиче­ским удовлетворением» и психоаналитическим «принципом удо­вольствия». Физиологические объяснения связаны с понятием сокращения побуждения (drive reduction) и гомеостазом.

Возвращаясь к эмпирическому описанию подкрепляющих раздражителей, установим, что пищу, воду, секс и боль назы­вают первичными подкрепляющими раздражителями, поскольку они связаны с удовлетворением основных физиологических потребностей. Однако способ приобретения подкрепляющего характера многих раздражителей напоминает классическое обу­словливание условного рефлекса. Для создания подкрепляю­щего раздражителя второго уровня воздействуют индиффе­рентным и подкрепляющим первичным раздражителем до тех пор, пока первый не приобретет подкрепляющего характера, то есть способность сдерживать угасание некой реакции или подкреплять научение новой реакции. Характер награды под­крепления второго уровня виден на примере эксперимента Бугески (1938) с двумя группами крыс, у которых обусловили рефлекс нажатия рычага для получения пищи, которая со сту­ком падала в камеру Скиннера. В период угасания в первой

________ Глава 2. Принципы обусловливания рефлексов и научения

группе стук сохранялся, во второй — прекращался. Рефлекс на­жатия рычага медленнее угасал в первой группе. Иначе говоря, стук действовал как подкрепление второго уровня, задерживая угасание в связи с отсутствием первичного подкрепления. По­добным образом при возникновении связи с неприятными раз­дражителями индифферентные раздражители вызывают отвра­щение. Описанное выше научение условного рефлекса избегания заключается в обусловливании рефлекса вторичного подкреп­ляющего раздражителя. Другим примером научения, основанно­го на подкреплении второго уровня (Miller, 1948), являются кры­сы с обусловленным рефлексом бегства из белой в черную ко­робку с помощью ударов током в белой. После закрепления это­го рефлекса удары током уже не использовались, но, несмотря на это, если крыс сажали в белую коробку, то они продолжали немедленно убегать в черную. Белая коробка стала условным негативным раздражителем (второго уровня, отрицательно под­крепляющим). Множество данных свидетельствует о том, что пе­ременные, воздействующие на классическое и инструментальное обусловливания рефлекса, влияют подобным образом на появле­ние подкрепляющих раздражителей второго уровня.

Кроме способности усиления рефлексов первичным под­крепляющим раздражителям свойственна функция мотива­ции. Подобным образом и подкрепляющие раздражители вто­рого уровня приобретают мотивационные свойства в том смыс­ле, что они выполняют роль цели, которая направляет поведе­ние. В понимании некоторых представителей теории научения, концепция подкрепления второго уровня облегчает объясне­ние целой гаммы экспериментальных данных. Например, спо­собность увеличивать сопротивление угасанию, свойственная частичному подкреплению, может заключаться в том, что в ходе приобретения рефлекса возникает некий вторичный под­крепляю-щий раздражитель, действующий в тех случаях, когда отсутствует первичное подкрепление. Одна из важнейших осо­бенностей подкрепления второго уровня — способность вли­ять на поведение до воздействия первичного подкрепления. Халл (1952) выдвинул концепцию «частичных антиципационных награждающих реакций» (fractional anticipatory goal responses), которая призвана объяснить очередные элементы поведения при решении сложных проблем, когда первичное подкрепление приостанавливается до предоставления оконча­тельного и верного ответа.

Методы поведенческой терапии_________________________________

Принцип подкрепления и мотивации второго уровня про­ясняет влияние научения на мотивацию. В экспериментах с шимпанзе удалось сделать деньги или жетоны вторичными под­крепляющими раздражителями, стимулирующими этих живот­ных. Разумеется, приобретенные влечения стимулируют мно­гие аспекты поведения человека, которое не управляется не­посредственно первичными влечениями, такими, как голод и сексуальное поведение.

Дата добавления: 2015-07-11