Угасание — поведенческий феномен, наблюдаемый как при оперантно-обусловленном , так и при классически-обусловленном поведении, который проявляется угасанием с течением времени неподкрепленной условной реакции. Когда оперантное поведение, которое ранее подкреплялось, больше не приводит к подкрепляющим последствиям, поведение постепенно перестает проявляться. [1] При классическом обуславливании, когда условный раздражитель предъявляется отдельно и больше не предсказывает появление безусловного раздражителя, условная реакция постепенно прекращается. Например, после того, как собаку Павлова приучили выделять слюну при звуке метронома, она в конечном итоге перестала выделять слюну в сторону метронома после того, как метроном звучал неоднократно, но еда не поступала. Считается , что многие тревожные расстройства , такие как посттравматическое стрессовое расстройство, отражают, по крайней мере частично, неспособность погасить условный страх. [2]
Преобладающая теория вымирания включает в себя ассоциативные модели. Однако ведутся споры о том, включает ли вымирание просто «отучение» ассоциации безусловный стимул (US) – условный стимул (CS) (например, теория Рескорлы – Вагнера ) или, альтернативно, «новое обучение» тормозной ассоциации, которая маскирует исходная возбуждающая ассоциация (например, по мнению Конорского, Пирса и Холла). Третья версия касается неассоциативных механизмов, таких как привыкание, модуляция и утомление реакции. Майерс и Дэвис исследуют исчезновение страха у грызунов и предположили, что в зависимости от времени и обстоятельств, при которых происходит исчезновение, могут действовать несколько механизмов. [3]
Учитывая противоречивые взгляды и трудные наблюдения для различных источников, исследователи обратились к исследованиям на клеточном уровне (чаще всего на грызунах), чтобы выявить конкретные механизмы угасания мозга, в частности роль структур мозга (миндалевидное тело, гиппокамп, префронтальная кора) и специфические нейромедиаторные системы (например, ГАМК , NMDA ). [3] Недавнее исследование Амано, Унала и Паре на грызунах, опубликованное в журнале Nature Neuroscience, показало, что угасание условной реакции страха коррелирует с синаптическим торможением в выходных нейронах страха центральной миндалины , которые проецируются на периакведуктальный серый цвет , который контролирует поведение замирания. . Они делают вывод, что торможение происходит в вентромедиальной префронтальной коре , и предлагают многообещающие мишени на клеточном уровне для новых методов лечения тревоги. [4]
Угасание обучения также может происходить в классической парадигме обусловленности . В этой модели нейтральный сигнал или контекст может вызвать условную реакцию, когда он сочетается с безусловным стимулом. Безусловный раздражитель — это тот, который естественным образом и автоматически вызывает определенную поведенческую реакцию. Определенный стимул или среда могут стать условным сигналом или условным контекстом соответственно в сочетании с безусловным стимулом. Примером этого процесса является парадигма формирования страха с использованием мыши. В этом случае тон в сочетании с легким толчком ноги может стать условным сигналом, вызывающим реакцию страха, если он будет предъявлен отдельно в будущем. Точно так же контекст, в котором происходит удар ногой, например, камера определенных размеров и определенного запаха, может вызвать ту же самую реакцию страха, когда мышь помещают обратно в эту камеру в отсутствие толчка ногами.
В этой парадигме угасание происходит, когда животное повторно подвергается воздействию условного сигнала или условного контекста в отсутствие безусловного раздражителя. Когда животное узнает, что сигнал или контекст больше не предсказывает появление безусловного стимула, условная реакция постепенно уменьшается или затухает.
В парадигме оперантного обусловливания угашение относится к процессу прекращения предоставления подкрепления, которое поддерживало поведение. Оперантное угашение отличается от забывания тем, что последнее относится к уменьшению силы поведения с течением времени, когда оно не было проявлено. [5] Например, ребенок, который залезает под стол (реакция, подкрепленная вниманием) , впоследствии игнорируется до тех пор, пока поведение , направленное на поиск внимания , больше не прекращается. В своей автобиографии Б. Ф. Скиннер отмечал, как случайно обнаружил угасание оперантного ответа из-за неисправности его лабораторного оборудования:
Моя первая кривая вымирания появилась случайно. Крыса нажимала на рычаг в эксперименте по насыщению, когда дозатор гранул заклинил. В то время меня там не было, а когда я вернулся, то обнаружил красивую кривую. Крыса продолжала давить, хотя гранулы не поступали. ... Изменение было более упорядоченным, чем угасание слюнного рефлекса в обстановке Павлова, и я ужасно возбудился. Это был полдень пятницы, и в лаборатории не было никого, кому я мог бы об этом рассказать. Все эти выходные я переходил улицы с особой осторожностью и избегал всех ненужных рисков, чтобы защитить свое открытие от потери из-за случайной смерти. [6]
Когда произошло угасание реакции, дискриминативный стимул известен как стимул угасания (SΔ или S-дельта ). Когда присутствует S-дельта, подкрепляющих последствий, которые обычно следуют за поведением, не возникает. Это противоположность дискриминативному стимулу , который является сигналом о том, что произойдет подкрепление. Например, в оперантной камере , если пищевые гранулы доставляются только тогда, когда реакция возникает в присутствии зеленого света, зеленый свет является различительным стимулом. Если при наличии красного света еда не будет доставлена, то красный свет является стимулом угасания (еда здесь используется как пример подкрепления ) . Однако некоторые проводят различие между стимулами угасания и «S-дельта» из-за того, что поведение не имеет истории подкрепления, т.е. в массиве из трех предметов (телефон, ручка, бумага) «Какой из них телефон», «ручка» и «бумага» не вызовет реакции у учителя, но технически не является исчезновением при первой попытке из-за того, что при выборе «ручки» или «бумаги» отсутствует история подкрепления. Это по-прежнему будет считаться S-Delta.
Чтобы вымирание работало эффективно, его необходимо делать последовательно. Угашение считается успешным, если реакция в присутствии стимула угашения (например, красного света или учителя, не обращающего плохого внимания на ученика) равна нулю. Когда поведение снова появляется после того, как оно исчезло, это называется спонтанным восстановлением . Это (вымирание) является результатом проблемного поведения, которое больше не происходит без необходимости подкрепления. Если произойдет рецидив и будет дано подкрепление, проблемное поведение вернется. Вымирание может быть длительным процессом; поэтому для достижения успешного результата требуется, чтобы координатор процедуры полностью вложился в процесс от начала до конца. [7] Меньшее количество проблемного поведения, наблюдаемое после вымирания, скорее всего, приведет к менее значительному спонтанному восстановлению . [8] При стремлении к вымиранию существуют разные распределения или графики введения подкреплений. Некоторые люди могут использовать прерывистый график подкрепления, который включает в себя: фиксированное соотношение, переменное соотношение, фиксированный интервал и переменный интервал. Другой вариант – использовать непрерывное армирование. Графики могут быть как фиксированными, так и переменными, а также количество подкреплений, подаваемых в течение каждого интервала, может варьироваться. [9]
Позитивная атмосфера в классе дает лучшие результаты в развитии обучения. Следовательно, чтобы дети могли успешно учиться в классе, в их среде не должно быть проблемного поведения, которое может отвлекать. [10] Класс должен быть местом, обеспечивающим последовательность, структуру и стабильность, где учащийся чувствует себя уполномоченным, поддержанным и в безопасности. Когда возникает проблемное поведение, возможности обучения уменьшаются. [11] Проблемное поведение в классе, устранение которого было бы полезно, может включать в себя поведение, не связанное с выполнением задач, болтовню, крик, перебивание и использование ненормативной лексики. [12] Метод угасания использовался в первую очередь, когда проблемное поведение мешало успешным результатам в классе. [13] Хотя в сочетании с вымиранием использовались и другие методы, положительные результаты маловероятны, если вымирание не используется в поведенческих вмешательствах. [12]
Хотя угасание, если оно осуществляется последовательно в течение долгого времени, в конечном итоге приводит к уменьшению нежелательного поведения, в краткосрочной перспективе у субъекта может проявиться так называемый всплеск угасания . Всплеск вымирания часто происходит, когда процедура угасания только началась. Обычно это состоит из внезапного и временного увеличения частоты реакции, за которым следует возможное снижение и исчезновение поведения, которое необходимо устранить. Также может возникнуть новое поведение, эмоциональные реакции или агрессивное поведение. [1]
Например, голубя подкрепили клевать электронную кнопку. За время обучения каждый раз, когда голубь клевал кнопку, он получал небольшое количество птичьего семени в качестве подкрепления. Таким образом, всякий раз, когда птица голодна, она клюнет кнопку, чтобы получить еду. Однако, если кнопку нужно выключить, голодный голубь сначала попытается клевать кнопку, как он это делал в прошлом. Если еды нет, птица, скорее всего, попытается это сделать повторно. После периода бешеной активности, когда их клевание не дает результата, частота клевания голубя снижается.
Хотя это и не объясняется теорией подкрепления , взрыв угасания можно понять с помощью теории управления. В теории перцептивного контроля степень результата, участвующего в любом действии, пропорциональна несоответствию между эталонным значением (желаемой ставкой вознаграждения в оперантной парадигме) и текущим входом. Таким образом, когда вознаграждение удаляется, расхождение увеличивается, а выпуск увеличивается. В долгосрочной перспективе «реорганизация», алгоритм обучения теории управления, адаптирует систему управления таким образом, что объем производства сократится.
Эволюционное преимущество этого всплеска вымирания очевидно. В естественной среде животное, которое продолжает придерживаться заученного поведения, несмотря на то, что оно не приводит к немедленному подкреплению, все равно может иметь шанс вызвать подкрепляющие последствия, если животное попытается еще раз. Это животное будет иметь преимущество перед другим животным, которое слишком легко сдается.
Однако, несмотря на название, не всякая взрывная реакция на неблагоприятные раздражители спадает до угасания. Действительно, небольшое меньшинство людей упорствует в своей реакции на неопределенный срок.
Изменчивость, вызванная вымиранием, выполняет адаптивную роль, аналогичную вспышке вымирания. Когда начинается угасание, у субъектов могут наблюдаться изменения топографии реакции (движений, участвующих в реакции). Топография ответа всегда несколько изменчива из-за различий в окружающей среде или идиосинкразических причин, но обычно история подкрепления субъекта сохраняет небольшие вариации стабильными, сохраняя успешные вариации по сравнению с менее успешными. Вымирание может значительно увеличить эти вариации, поскольку субъект пытается получить подкрепление, созданное предыдущим поведением. Если человек пытается открыть дверь, повернув ручку, но безуспешно, он может затем попытаться покачать ручку, нажать на раму, постучать в дверь или использовать другие действия, чтобы дверь открылась. Изменчивость, вызванная вымиранием, можно использовать для формирования , чтобы уменьшить проблемное поведение путем усиления желательного поведения, вызванного изменчивостью, вызванной вымиранием.
Известно, что дети с расстройством аутистического спектра (РАС) имеют ограниченное или повторяющееся поведение, которое может вызвать проблемы при попытке выполнять повседневную деятельность. [14] Вымирание используется в качестве вмешательства, помогающего справиться с проблемным поведением. [15] Некоторые проблемные модели поведения могут включать, помимо прочего, самоповреждающее поведение, агрессию, истерики, проблемы со сном и принятием решений. [16] Игнорирование определенных видов самоповреждающего поведения может привести к исчезновению такого поведения у детей с РАС. [17] Escape Extinction (EE) обычно используется в тех случаях, когда необходимость делать выбор вызывает проблемное поведение. [18] Примером может быть необходимость выбора между зубной пастой со вкусом мяты или клубники при чистке зубов. Это будут единственные два доступных варианта. При реализации ЭЭ интервенционист будет использовать физические и вербальные подсказки, чтобы помочь субъекту сделать выбор. [18]
Глутамат — это нейромедиатор, который активно участвует в нейронной основе обучения. [19] D- Циклосерин (DCS) является частичным агонистом глутаматного рецептора NMDA в глициновом участке и был опробован в качестве дополнения к традиционным методам лечения, основанным на воздействии, основанным на принципе угасания сигнала.
В ходе испытаний на крысах также была выявлена роль глутамата в исчезновении раздражителей окружающей среды, связанных с кокаином. В частности, метаботропный рецептор глутамата 5 (mGlu5) важен для исчезновения контекста, связанного с кокаином [20] , и сигнала, связанного с кокаином. [21]
Дофамин — еще один нейромедиатор, участвующий в угашении обучения как в аппетитной, так и в аверсивной областях. [22] Передача сигналов дофамина участвует в исчезновении условного страха [23] [24] [25] [26] [27] и исчезновении обучения, связанного с наркотиками [28] [29]
Область мозга, наиболее активно вовлеченная в угашение обучения, — это подлимбическая кора ( IL) медиальной префронтальной коры (mPFC) [30] . в исчезновении обусловленного страха. [3] Задняя поясная извилина (PCC) и височно-теменное соединение (TPJ) также были идентифицированы как области, которые могут быть связаны с нарушением угасания у подростков. [31]
Есть убедительные доказательства того, что вымирание меняется в зависимости от развития. [32] [33] То есть процесс угасания обучения может различаться в младенчестве, детстве, подростковом и взрослом возрасте. В младенчестве и детстве угасание обучения особенно стойкое, что некоторые интерпретируют как стирание первоначальной ассоциации CS-US, [34] [35] [36], но это остается спорным. Напротив, в подростковом и взрослом возрасте угасание менее стойкое, что интерпретируется как новое изучение ассоциации CS-no US, которая существует в тандеме и в оппозиции к исходной памяти CS-US. [37] [38]
{{cite book}}
: CS1 maint: отсутствует местоположение издателя ( ссылка ){{cite book}}
: CS1 maint: другие ( ссылка ){{cite journal}}
: CS1 maint: несколько имен: список авторов ( ссылка )