В поведенческой психологии подкрепление относится к последствиям , которые увеличивают вероятность будущего поведения организма, обычно при наличии определенного предшествующего стимула . [1] Например, крысу можно научить нажимать на рычаг, чтобы получить еду, каждый раз, когда включается свет. В этом примере свет является предшествующим стимулом, нажатие на рычаг — оперантным поведением, а еда — подкреплением. Аналогичным образом, ученик, который получает внимание и похвалу при ответе на вопрос учителя, с большей вероятностью ответит на будущие вопросы в классе. Вопрос учителя является антецедентом, ответ ученика — поведением, а похвала и внимание — подкреплением.
Последствия, которые приводят к аппетитному поведению, такие как субъективное «желание» и «пристрастие» (желание и удовольствие), действуют как вознаграждение или положительное подкрепление . [2] Существует также негативное подкрепление , которое предполагает устранение нежелательного стимула. Примером негативного подкрепления может быть прием аспирина для облегчения головной боли.
Подкрепление является важным компонентом оперантного обусловливания и модификации поведения . Эта концепция применялась в различных практических областях, включая воспитание детей, коучинг, терапию, самопомощь, образование и управление.
В науках о поведении термины «положительный» и «негативный» при использовании в их строгом техническом смысле относятся к природе действия, выполняемого обусловливающим, а не к оценке реагирующего операнта этого действия и его последствий. «Позитивные» действия — это те, которые добавляют в окружающую среду фактор, будь то приятный или неприятный, тогда как «негативные» действия — это те, которые удаляют или удерживают из окружающей среды фактор любого типа. В свою очередь, строгий смысл «подкрепления» относится только к обусловлению, основанному на вознаграждении; введение неприятных факторов и удаление или удержание приятных факторов вместо этого называются «наказанием», которое в строгом смысле, таким образом, противопоставляется «подкреплению». Таким образом, «положительное подкрепление» относится к добавлению приятного фактора, «положительное наказание» относится к добавлению неприятного фактора, «отрицательное подкрепление» относится к удалению или удержанию неприятного фактора, а «негативное наказание» относится к удаление или удержание приятного фактора.
Такое использование противоречит некоторым нетехническим значениям четырех комбинаций терминов, особенно в случае термина «негативное подкрепление», которое часто используется для обозначения того, что на техническом языке можно было бы назвать «положительным наказанием», поскольку не Техническое использование интерпретирует «подкрепление» как включающее в себя как вознаграждение, так и наказание, а «негативное» - как относящееся к оценке реагирующим оперантом вводимого фактора. Напротив, в техническом языке будет использоваться термин «негативное подкрепление» для описания поощрения определенного поведения путем создания сценария, в котором неприятный фактор присутствует или будет присутствовать, но участие в таком поведении приводит либо к бегству от этого фактора, либо к предотвращению его возникновения. , как в эксперименте Мартина Селигмана, в котором собаки учились избегать поражения электрическим током .
Б. Ф. Скиннер был известным и влиятельным исследователем, сформулировавшим многие теоретические конструкции подкрепления и бихевиоризма . Скиннер определял подкрепления в соответствии с изменением силы реакции (скорости ответа), а не более субъективными критериями, такими как то, что кому-то приятно или ценно. Соответственно, действия, продукты или предметы, считающиеся приятными или доставляющими удовольствие, не обязательно могут быть подкрепляющими (поскольку они не вызывают усиления предшествующей им реакции). Стимулы, условия и действия подходят под определение подкреплений только в том случае, если поведение, которое непосредственно предшествует потенциальному подкреплению, усиливается в аналогичных ситуациях в будущем; например, ребенок, который получает печенье, когда просит его. Если частота «запроса файлов cookie» увеличивается, файл cookie можно рассматривать как усиливающий «поведение запроса файлов cookie». Однако, если «поведение при запросе файлов cookie» не усиливается, файлы cookie не могут считаться усиливающими.
Единственным критерием, определяющим, является ли стимул подкрепляющим, является изменение вероятности поведения после введения этого потенциального подкрепления. Другие теории могут фокусироваться на дополнительных факторах, например, ожидал ли человек, что поведение приведет к определенному результату, но в поведенческой теории подкрепление определяется повышенной вероятностью реакции.
Изучение подкрепления дало огромное количество воспроизводимых экспериментальных результатов. Подкрепление является центральной концепцией и процедурой в специальном образовании , прикладном поведенческом анализе и экспериментальном анализе поведения, а также основной концепцией в некоторых медицинских и психофармакологических моделях, особенно в моделях зависимости , зависимости и принуждения .
Лабораторные исследования подкрепления обычно датируются работами Эдварда Торндайка , известного своими экспериментами с кошками, убегающими из коробок-головоломок. [6] Ряд других продолжили это исследование, в частности Б. Ф. Скиннер, который опубликовал свою плодотворную работу по этой теме в книге «Поведение организмов» в 1938 году и развил это исследование во многих последующих публикациях. [7] В частности, Скиннер утверждал, что положительное подкрепление превосходит наказание в формировании поведения. [8] Хотя наказание может показаться полной противоположностью подкрепления, Скиннер утверждал, что они сильно различаются, утверждая, что положительное подкрепление приводит к устойчивому изменению поведения (долгосрочному), тогда как наказание меняет поведение только временно (краткосрочно) и имеет много вредных сторон. -последствия.
Многие исследователи впоследствии расширили наше понимание подкрепления и поставили под сомнение некоторые выводы Скиннера. Например, Азрин и Хольц определили наказание как «последствие поведения, которое снижает вероятность такого поведения в будущем» [9] , а некоторые исследования показали, что положительное подкрепление и наказание одинаково эффективны для изменения поведения. [ нужна цитация ] Исследования эффектов положительного подкрепления, отрицательного подкрепления и наказания продолжаются и сегодня, поскольку эти концепции имеют основополагающее значение для теории обучения и применимы ко многим практическим применениям этой теории.
Термин оперантное обусловливание был введен Скиннером, чтобы указать, что в его экспериментальной парадигме организм может свободно воздействовать на окружающую среду. В этой парадигме экспериментатор не может вызвать желаемую реакцию; экспериментатор ждет, пока произойдет ответ (который будет излучаться организмом), а затем будет доставлено потенциальное подкрепление. В классической парадигме обусловливания экспериментатор запускает (вызывает) желаемую реакцию, предъявляя рефлекторный стимул, безусловный стимул (UCS), который он сочетает (предшествует) с нейтральным стимулом, условным стимулом (CS).
Подкрепление – это основной термин в оперантном обусловливании. Информацию о наказании в оперантном обусловливании см. в разделе « Наказание (психология)» .
Позитивное подкрепление возникает, когда желаемое событие или стимул представляется как следствие поведения, и вероятность того, что это поведение проявится в аналогичной среде, увеличивается. [10] : 253
Методика обучения с высокой вероятностью (HPI) — это бихевиористский подход, основанный на идее положительного подкрепления.
Негативное подкрепление увеличивает вероятность поведения, направленного на избегание или избегание неприятных ситуаций или стимулов . [10] : 253 Делать что-то неприятное для людей с целью предотвратить или предотвратить повторение такого поведения — это наказание , а не негативное подкрепление. Разница в том, что подкрепление всегда увеличивает вероятность определенного поведения, тогда как наказание всегда снижает ее.
Угашение происходит, когда данное поведение игнорируется (т. е. его отслеживание не приводит к каким-либо последствиям), и со временем оно исчезает, если поведение постоянно не получает подкрепления. Поведение после вымирания сначала резко возрастает, а затем со временем снижается. Вымирание не обязательно должно быть преднамеренным, чтобы повлиять на поведение субъекта.
Подкрепления служат для усиления поведения, тогда как наказания служат для его уменьшения; таким образом, положительные подкрепления — это стимулы, над достижением которых субъект будет работать, а отрицательные подкрепления — это стимулы, от которых субъект будет стараться избавиться или положить конец. [11] В таблице ниже показано добавление и удаление стимулов (приятных или неприятных) в зависимости от подкрепления и наказания.
Первичное подкрепление , иногда называемое безусловным подкреплением , представляет собой стимул, который не требует соединения с другим стимулом , чтобы функционировать в качестве подкрепления, и, скорее всего, получил эту функцию в результате эволюции и своей роли в выживании вида. [13] Примеры первичных подкреплений включают еду, воду и секс. Некоторые первичные подкрепления, например определенные лекарства, могут имитировать эффекты других первичных подкреплений. Хотя эти первичные подкрепления довольно стабильны на протяжении всей жизни и у разных людей, ценность подкрепления различных первичных подкреплений варьируется в зависимости от множества факторов (например, генетики, опыта). Таким образом, один человек может предпочитать один тип пищи, а другой избегает его. Или один человек может есть много еды, а другой - очень мало. Таким образом, хотя еда является основным подкреплением для обоих людей, ценность еды как подкрепления у них разная.
Вторичное подкрепление , иногда называемое условным подкреплением , представляет собой стимул или ситуацию, которая приобрела свою функцию подкрепления после соединения со стимулом , который действует как подкрепление. Этот стимул может быть первичным подкреплением или другим условным подкреплением (например, деньгами).
Пытаясь отличить первичные и вторичные подкрепления на примере людей, используйте «тест пещерного человека». Если стимулом является что-то, что пещерный человек, естественно, счел бы желательным (например, конфеты), то это первичное подкрепление. Если, с другой стороны, пещерный человек не отреагировал на это (например, на долларовую купюру), это вторичное подкрепление. Как и в случае с первичными подкреплениями, организм может испытывать удовлетворение и лишения при использовании вторичных подкреплений.
В своей статье 1967 года «Произвольное и естественное подкрепление » Чарльз Ферстер предложил классифицировать подкрепление на события, которые увеличивают частоту оперантного поведения как естественное следствие самого поведения, и события, которые влияют на частоту в силу необходимости человеческого посредничества, например, в символическая экономика , при которой субъекты вознаграждаются за определенное поведение терапевта.
В 1970 году Баер и Вольф разработали концепцию «поведенческих ловушек». [17] Поведенческая ловушка требует только простой реакции, чтобы попасть в ловушку, но, попав в ловушку, невозможно сопротивляться ловушке, вызывая общее изменение поведения. Использование поведенческих ловушек расширяет репертуар человека, подвергая его естественному подкреплению такого поведения. Поведенческие ловушки имеют четыре характеристики:
Таким образом, искусственное подкрепление может использоваться для создания или развития обобщаемых навыков, в конечном итоге переходя к естественному подкреплению для поддержания или усиления поведения. Другим примером является социальная ситуация, которая обычно возникает в результате определенного поведения, если оно соответствует определенному критерию.
Поведение не всегда подкрепляется каждый раз, когда оно реализуется, и характер подкрепления сильно влияет на то, насколько быстро усваивается оперантная реакция, какова ее скорость в любой момент времени и как долго она продолжается после прекращения подкрепления. Простейшие правила, контролирующие подкрепление, — это непрерывное подкрепление, при котором подкрепляется каждая реакция, и угасание, при котором ни одна реакция не подкрепляется. Между этими крайностями более сложные схемы подкрепления определяют правила, определяющие, как и когда подкрепитель будет следовать реакции.
Определенные схемы подкрепления надежно вызывают определенные модели реакции, и эти правила применимы ко многим различным видам. Различная последовательность и предсказуемость подкрепления оказывают важное влияние на то, как работают различные графики. Многие простые и сложные графики были подробно исследованы Б. Ф. Скиннером с использованием голубей .
Простые графики имеют одно правило, определяющее, когда для конкретной реакции применяется один тип подкрепления.
Простые графики используются во многих процедурах дифференциального подкрепления [19] :
Сложные графики каким-то образом объединяют два или более разных простых графика, используя одно и то же подкрепление для одного и того же поведения. Есть много возможностей; среди наиболее часто используемых:
Термин психологии «наложенные схемы подкрепления» относится к структуре вознаграждений, при которой два или более простых графика подкрепления действуют одновременно . Подкрепления могут быть положительными, отрицательными или и теми, и другими. Примером может служить человек, который приходит домой после долгого рабочего дня. Открытие входной двери вознаграждается крепким поцелуем в губы супруга человека и разрывом штанов от восторженно прыгающей семейной собаки. Другой пример наложенных графиков подкрепления — голубь в экспериментальной клетке, клюющий кнопку. Клевки доставляют бункер с зерном каждый 20-й клев, а доступ к воде – после каждых 200 клевков.
Наложенные графики подкрепления — это тип составного графика, который развился из первоначальных работ Б. Ф. Скиннера и его коллег над простыми графиками подкрепления (Skinner and Ferster, 1957) . Они продемонстрировали, что подкрепления можно вводить по расписанию и, кроме того, что организмы ведут себя по-разному в зависимости от графика. Вместо того, чтобы подкрепление, такое как еда или вода, доставлялось каждый раз в результате определенного поведения, подкрепление могло быть доставлено после более чем одного экземпляра поведения. Например, голубю может потребоваться десять раз клюнуть кнопку выключателя, прежде чем появится еда. Это «график отношений». Кроме того, подкрепление может быть предоставлено через определенный промежуток времени после целевого поведения. Примером может служить крыса , которой дают пищевые гранулы сразу после первой реакции, которая возникает по истечении двух минут с момента последнего нажатия рычага. Это называется «интервальный график».
Кроме того, графики соотношений могут обеспечивать подкрепление после фиксированного или переменного количества поведенческих реакций отдельного организма. Аналогично, интервальные графики могут обеспечивать подкрепление через фиксированные или переменные интервалы времени после одной реакции организма. Индивидуальное поведение, как правило, приводит к скорости реакции, которая различается в зависимости от того, как создается график подкрепления. Многие последующие исследования во многих лабораториях изучали влияние планирования подкреплений на поведение.
Если организму предоставляется возможность выбирать между двумя или более простыми графиками подкрепления одновременно, структура подкрепления называется «параллельным графиком подкрепления». Брехнер (1974, 1977) ввел концепцию наложенных графиков подкрепления в попытке создать лабораторную аналогию социальных ловушек , например, когда люди чрезмерно вылавливают рыбные запасы или вырубают тропические леса. Брехнер создал ситуацию, когда простые графики подкрепления накладывались друг на друга. Другими словами, одна реакция или группа реакций организма привели к множеству последствий. Параллельные графики подкрепления можно рассматривать как графики «или», а наложенные графики подкрепления можно рассматривать как графики «и». Брехнер и Линдер (1981) и Брехнер (1987) расширили эту концепцию, чтобы описать, как наложенные графики и аналогия с социальной ловушкой могут быть использованы для анализа того, как энергия течет через системы .
Помимо создания социальных ловушек, наложенные графики подкрепления имеют множество реальных применений . Путем наложения простых схем подкрепления можно создать множество различных индивидуальных и социальных ситуаций между людьми. Например, у человека может быть одновременно табачная и алкогольная зависимость. Еще более сложные ситуации можно создать или смоделировать путем наложения двух или более параллельных графиков. Например, у старшеклассника может быть выбор между поступлением в Стэнфордский университет или Калифорнийский университет в Лос-Анджелесе, и в то же время у него может быть выбор пойти в армию или в ВВС, и одновременно устроиться на работу в интернет-компанию или работа в компании-разработчике программного обеспечения. Это структура подкрепления, состоящая из трех наложенных друг на друга параллельных графиков подкрепления.
Наложенные графики подкрепления могут создать три классические конфликтные ситуации (конфликт подхода-подхода, конфликт подхода-избегания и конфликт избегания-избегания), описанные Куртом Левином (1935), и могут операционализировать другие левиновские ситуации, проанализированные с помощью его анализа силового поля . Другими примерами использования наложенных графиков армирования в качестве аналитического инструмента являются его применение к непредвиденным обстоятельствам, связанным с контролем арендной платы (Brechner, 2003) и проблемой сброса токсичных отходов в систему ливневой канализации округа Лос-Анджелес (Brechner, 2010).
В оперантном обусловливании параллельные графики подкрепления — это графики подкрепления, которые одновременно доступны животному или участнику-человеку, так что субъект или участник могут реагировать по любому графику. Например, в задаче принудительного выбора с двумя альтернативами голубь в коробке Скиннера сталкивается с двумя клюющими ключами; В ответ на клевание можно ответить на любой из них, а за клеванием на любой из них может последовать подкрепление пищей. Графики армирования, устраиваемые для клевок на два ключа, могут быть разными. Они могут быть независимыми или могут быть связаны так, что поведение по одному ключу влияет на вероятность подкрепления по другому.
Нет необходимости, чтобы ответы на двух графиках были физически различны. В альтернативном способе организации параллельных расписаний, предложенном Финдли в 1958 году, оба расписания размещаются на одной клавише или другом реагирующем устройстве, и субъект может реагировать на вторую клавишу для переключения между расписаниями. В такой «параллельной» процедуре Финдли стимул (например, цвет главной клавиши) сигнализирует о том, какое расписание действует.
Параллельные расписания часто вызывают быстрое чередование клавиш. Чтобы предотвратить это, обычно вводят «задержку переключения»: каждый график деактивируется на короткое время после того, как субъект переключится на него.
Когда оба параллельных графика представляют собой переменные интервалы, между относительным уровнем ответа в двух графиках и относительным уровнем подкрепления, который они обеспечивают, обнаруживается количественная связь, известная как закон соответствия ; Впервые это было замечено Р. Дж. Хернштейном в 1961 году. Закон соответствия — это правило инструментального поведения, которое гласит, что относительная скорость реагирования на конкретную альтернативу ответа равна относительной скорости подкрепления для этой реакции (скорость поведения = скорость подкрепления). Животные и люди имеют тенденцию отдавать предпочтение выбору в расписании. [23]
Формирование — это усиление последовательных приближений к желаемому инструментальному отклику. Например, при обучении крысы нажимать на рычаг простой поворот к рычагу сначала усиливается. Тогда только поворот и шаг к нему получают подкрепление. Со временем крыса получит подкрепление для нажатия на рычаг. Успешное достижение одного поведения запускает процесс формирования следующего. По мере обучения реакция становится все более похожей на желаемое поведение, при этом каждое последующее поведение становится более близким к конечному поведению. [24]
Вмешательство шейпинга используется во многих обучающих ситуациях, а также для людей с аутизмом и другими нарушениями развития. Когда формирование сочетается с другими научно обоснованными практиками, такими как тренинг функционального общения (FCT), [25] оно может дать положительные результаты для поведения человека. Для формирования обычно используется непрерывное подкрепление, но позже реакцию можно перевести на прерывистый график подкрепления.
Формирование также применяют при отказе от еды. [26] Отказ от еды – это когда у человека возникает частичное или полное отвращение к еде. Это может быть как минимальное проявление придирчивости в еде, так и настолько серьезное, что может повлиять на здоровье человека. Формирование использовалось для достижения высокого уровня успеха при приеме пищи. [27]
Цепочка предполагает объединение отдельных видов поведения в серию, так что последствием каждого поведения является как подкрепление предыдущего поведения, так и предшествующий стимул для следующего поведения. Существует много способов обучения цепочке, например, прямая цепочка (начиная с первого поведения в цепочке), обратная цепочка (начиная с последнего поведения) и полная цепочка задач (обучение каждому поведению в цепочке одновременно). Утренний распорядок дня человека представляет собой типичную цепочку действий (например, принятие душа, вытирание, одевание), происходящих последовательно и являющихся хорошо усвоенной привычкой.
Проблемное поведение, наблюдаемое у людей с аутизмом и другими связанными с ним нарушениями, успешно контролировалось и поддерживалось в исследованиях с использованием схемы цепного подкрепления. [28] Тренировка функциональной коммуникации — это вмешательство, в котором часто используются цепочные графики подкрепления для эффективного содействия соответствующей и желаемой функциональной коммуникативной реакции. [29]
Были проведены исследования по построению математической модели армирования. Эта модель известна как MPR, что означает « математические принципы армирования» . Питер Киллин сделал ключевые открытия в этой области, исследуя голубей. [30]
Подкрепление и наказание повсеместно используются в социальных взаимодействиях людей, и было предложено и реализовано очень много применений оперантных принципов. Ниже приведены несколько примеров.
Позитивное и негативное подкрепление играют центральную роль в развитии и поддержании наркомании и наркозависимости . Наркотик, вызывающий привыкание, по своей сути приносит пользу ; то есть он действует как первичное положительное подкрепление употребления наркотиков. Система вознаграждения мозга придает ему значимость стимула (т.е. он «желателен» или «желателен»), [31] [32] [33], поэтому по мере развития зависимости лишение наркотика приводит к тяге. Кроме того, стимулы, связанные с употреблением наркотиков – например, вид шприца и место употребления – становятся ассоциированными с интенсивным подкреплением, вызываемым наркотиком. [31] [32] [33] Эти ранее нейтральные стимулы приобретают несколько свойств: их появление может вызвать тягу к еде, и они могут стать условным положительным подкреплением дальнейшего использования. [31] [32] [33] Таким образом, если зависимый человек сталкивается с одним из этих сигналов о наркотике, тяга к соответствующему наркотику может появиться снова. Например, агентства по борьбе с наркотиками ранее использовали плакаты с изображениями принадлежностей для употребления наркотиков , пытаясь показать опасность употребления наркотиков. Однако такие плакаты больше не используются из-за эффекта заметности стимулов, вызывающего рецидив при виде стимулов, изображенных на плакатах.
У лиц с наркотической зависимостью негативное подкрепление происходит, когда препарат принимается самостоятельно с целью облегчить или «избежать» симптомов физической зависимости (например, тремора и потливости) и/или психологической зависимости (например, ангедонии , беспокойства, раздражительности и тревожность), возникающие в состоянии отмены препарата . [31]
Дрессировщики и владельцы домашних животных применяли принципы и методы оперантного обусловливания задолго до того, как эти идеи были названы и изучены, и дрессировка животных до сих пор представляет собой один из самых ярких и убедительных примеров оперантного контроля. Из концепций и процедур, описанных в этой статье, наиболее важными являются: наличие немедленного подкрепления (например, вездесущий пакетик с собачьими вкусняшками); непредвиденные обстоятельства, гарантирующие, что подкрепление следует за желаемым поведением, а не за чем-то другим; использование вторичного подкрепления, например, прослушивание кликера сразу после желаемой реакции; формирование, например, постепенное принуждение собаки прыгать все выше и выше; прерывистое подкрепление, уменьшающее частоту употребления вкусняшек, чтобы вызвать устойчивое поведение без насыщения; цепочка, где сложное поведение постепенно объединяется. [34]
Обеспечение положительного подкрепления за соответствующее поведение ребенка является основным направлением обучения родителей управлению. Как правило, родители учатся вознаграждать соответствующее поведение с помощью социальных вознаграждений (таких как похвала, улыбки и объятия), а также конкретных наград (например, наклеек или указаний на более крупную награду в рамках системы стимулирования, созданной совместно с ребенком). [35] Кроме того, родители учатся выбирать простое поведение в качестве первоначального фокуса и вознаграждать каждый маленький шаг, который их ребенок делает на пути к достижению более крупной цели (эта концепция называется «последовательными приближениями»). [35] [36] Они также могут использовать косвенные вознаграждения, например, через диаграммы прогресса . Обеспечение положительного подкрепления в классе может способствовать успеху учащихся. Применяя положительное подкрепление к учащимся, очень важно сделать его индивидуализированным в соответствии с потребностями этого учащегося. Таким образом, ученик понимает, почему он получает похвалу, может принять ее и со временем научиться продолжать действие, заработанное положительным подкреплением. Например, использование поощрений или дополнительных перерывов может больше относиться к некоторым учащимся, тогда как другие могут согласиться с принуждением, получив наклейки или галочки с указанием похвалы.
И психологи, и экономисты заинтересовались применением оперантных концепций и результатов к поведению людей на рынке. Примером может служить анализ потребительского спроса, индексируемого по количеству приобретаемого товара. В экономике степень влияния цены на потребление называется «ценовой эластичностью спроса». Некоторые товары более эластичны, чем другие; например, изменение цен на определенные продукты питания может оказать большое влияние на объем покупок, в то время как бензин и другие предметы первой необходимости могут меньше зависеть от изменений цен. С точки зрения оперантного анализа такие эффекты можно интерпретировать с точки зрения мотивации потребителей и относительной ценности товаров в качестве подкрепления. [37]
Как говорилось ранее в этой статье, график с переменным соотношением дает подкрепление после подачи непредсказуемого количества ответов. Такой график обычно обеспечивает быстрое и настойчивое реагирование. Игровые автоматы окупаются по графику с переменным соотношением, и они вызывают у игроков именно такое постоянное поведение, связанное с использованием рычагов. Поскольку автоматы запрограммированы на выплату меньше денег, чем они получают, настойчивый пользователь игровых автоматов в долгосрочной перспективе неизменно проигрывает. Игровые автоматы и, следовательно, подкрепление с переменным соотношением часто называют фактором, лежащим в основе игровой зависимости. [38]
Концепция похвалы как средства поведенческого подкрепления у людей уходит корнями в модель оперантного обусловливания Б. Ф. Скиннера. С этой точки зрения похвала рассматривается как средство положительного подкрепления, при котором наблюдаемое поведение становится более вероятным за счет условной похвалы такого поведения. [39] Сотни исследований продемонстрировали эффективность похвалы в поощрении позитивного поведения, особенно в изучении использования похвалы учителями и родителями в отношении детей для улучшения поведения и успеваемости, [40] [41], а также в изучении производительность труда. [42] Также было продемонстрировано, что похвала усиливает позитивное поведение у нехваленных соседей (например, одноклассника получателя похвалы) посредством косвенного подкрепления. [43] Похвала может быть более или менее эффективной для изменения поведения в зависимости от ее формы, содержания и подачи. Для того чтобы похвала привела к позитивному изменению поведения, она должна быть обусловлена позитивным поведением (т. е. применяться только после того, как было реализовано целевое поведение), должна указывать детали поведения, которое необходимо подкрепить, и должна произноситься искренне и достоверно. [44]
Признавая эффект похвалы как стратегии положительного подкрепления, многочисленные поведенческие и когнитивно-поведенческие вмешательства включили использование похвалы в свои протоколы. [45] [46] Стратегическое использование похвалы признано научно обоснованной практикой как в управлении классом [45] , так и в мероприятиях по обучению родителей, [41] хотя в исследованиях вмешательства похвала часто относится к более широкой категории положительного подкрепления, который включает в себя такие стратегии, как стратегическое внимание и поведенческое вознаграждение.
Травматическая связь возникает в результате продолжающихся циклов насилия, в которых периодическое усиление вознаграждений и наказаний создает мощные эмоциональные связи, устойчивые к изменениям. [47] [48]
Другой источник указал, что [49] «Необходимыми условиями для травматической связи является то, что один человек должен доминировать над другим и что уровень жестокого обращения хронически возрастает, а затем спадает. Отношения характеризуются периодами снисходительного, сострадательного и даже нежного поведения со стороны доминирующего человека, перемежающимися периодическими эпизодами интенсивного насилия. Чтобы сохранить преимущество, обидчик манипулирует поведением жертвы и ограничивает ее возможности, чтобы увековечить дисбаланс сил. Любая угроза балансу доминирования и подчинения может быть встречена ужесточающимся циклом наказаний, начиная от яростного запугивания и заканчивая вспышками чрезвычайного насилия. Преступник также изолирует жертву от других источников поддержки, что снижает вероятность обнаружения и вмешательства, ухудшает способность жертвы получать уравновешивающую самореферентную обратную связь и усиливает чувство односторонней зависимости... Травматические последствия этих оскорбительных отношений может включать ухудшение способности жертвы к точной самооценке, что приводит к ощущению личной неадекватности и подчиненному чувству зависимости от доминирующего человека. Жертвы также могут столкнуться с множеством неприятных социальных и правовых последствий своей эмоциональной и поведенческой принадлежности к лицу, совершившему агрессивные действия, даже если они сами были объектами агрессии.
Большинство видеоигр построены на основе того или иного типа цикла принуждения, добавляя своего рода положительное подкрепление посредством графика переменной скорости, чтобы игрок продолжал играть в игру, хотя это также может привести к зависимости от видеоигр . [50]
В рамках тенденции монетизации видеоигр 2010-х годов в некоторых играх в качестве награды предлагались «лутбоксы» или их можно было приобрести за реальные фонды, которые предлагали случайный выбор внутриигровых предметов, распределенных по редкости. Эта практика связана с теми же методами, которыми выдают вознаграждения игровые автоматы и другие игровые устройства, поскольку она следует графику переменных ставок. Несмотря на общее мнение, что лутбоксы являются формой азартной игры, эта практика классифицируется как азартная игра и в других отношениях законная только в нескольких странах. Однако методы использования этих предметов в качестве виртуальной валюты для онлайн-азартных игр или торговли на реальные деньги создали рынок скин-гемблинга , который находится на стадии юридической оценки. [51]
Стандартное определение поведенческого подкрепления подверглось критике как циклическое , поскольку оно, по-видимому, утверждает, что сила реакции увеличивается за счет подкрепления, и определяет подкрепление как нечто, что увеличивает силу реакции (т. е. сила реакции увеличивается за счет вещей, которые увеличивают силу реакции). Однако правильное использование [52] подкрепления заключается в том, что что-то является подкреплением из-за своего влияния на поведение, а не наоборот. Это становится круговым, если говорить, что конкретный стимул усиливает поведение, потому что он является подкреплением, и не объясняет, почему стимул оказывает такое влияние на поведение. Были предложены и другие определения, такие как «непревзойденное поведение, зависящее от реакции» Ф.Д. Шеффилда, но они широко не используются в психологии. [53]
Понимание роли, которую играют подкрепления, все чаще переходит от «усиливающего» эффекта к «сигнальному». [54] То есть точка зрения, согласно которой подкрепления усиливают реакцию, потому что они сигнализируют о поведении, которое может привести к подкреплению. Хотя в большинстве практических применений эффект любого данного подкрепления будет одинаковым независимо от того, подает ли подкрепление сигнал или усиливается, этот подход помогает объяснить ряд поведенческих феноменов, включая модели реагирования на прерывистые графики подкрепления (гребешки с фиксированными интервалами) и эффект дифференцированных результатов . [55]
Награды в оперантном обусловливании являются положительным подкреплением. ... Оперантное поведение дает хорошее определение вознаграждения. Все, что заставляет человека возвращаться и требовать большего, является положительным подкреплением и, следовательно, наградой. Хотя положительное подкрепление дает хорошее определение, оно является лишь одной из нескольких функций вознаграждения. ... Награды привлекательны. Они мотивируют и заставляют нас прилагать усилия. ... Награды стимулируют поведение приближения, также называемое аппетитным или подготовительным поведением, и завершающее поведение. ... Таким образом, любой стимул, объект, событие, деятельность или ситуация, которая потенциально может заставить нас приблизиться и поглотить его, по определению является наградой. ... Внутренние вознаграждения — это действия, которые доставляют удовольствие сами по себе и предпринимаются ради самих себя, не являясь средством получения внешних вознаграждений. ... Внутренние награды сами по себе являются настоящими наградами, поскольку они побуждают к обучению, подходу и удовольствию, например, к совершенствованию, игре на фортепиано и получению удовольствия. Хотя они могут служить для обусловления вознаграждений более высокого порядка, они не являются обусловленными вознаграждениями более высокого порядка, поскольку для достижения их свойств вознаграждения не требуется соединение с безусловным вознаграждением.
Несмотря на важность многочисленных психосоциальных факторов, по своей сути наркозависимость включает в себя биологический процесс: способность многократного воздействия злоупотребляемого наркотика вызывать изменения в уязвимом мозге, которые приводят к компульсивному поиску и приему наркотиков, и потеря контроля над употреблением наркотиков, определяющая состояние наркомании. ... Большой объем литературы продемонстрировал, что такая индукция ΔFosB в нейронах [прилежащего ядра] типа D1 увеличивает чувствительность животного к лекарственному средству, а также к естественным вознаграждениям и способствует самостоятельному приему лекарственного средства, предположительно посредством процесса положительного подкрепления. Еще одной мишенью ΔFosB является cFos: поскольку ΔFosB накапливается при повторном воздействии препарата, он подавляет c-Fos и способствует молекулярному переключению, посредством которого ΔFosB избирательно индуцируется в состоянии хронического лечения препаратом.
41
. ... Более того, появляется все больше свидетельств того, что, несмотря на целый ряд генетических рисков развития зависимости среди населения, воздействие достаточно высоких доз наркотика в течение длительного периода времени может превратить человека с относительно низкой генетической нагрузкой в наркомана.
Расстройство, связанное с употреблением психоактивных веществ: диагностический термин в пятом издании Диагностического и статистического руководства по психическим расстройствам (DSM-5), относящийся к повторяющемуся употреблению алкоголя или других наркотиков, которое вызывает клинически и функционально значимые нарушения, такие как проблемы со здоровьем. инвалидность и неспособность выполнять основные обязанности на работе, в школе или дома. В зависимости от степени тяжести это расстройство классифицируется как легкое, среднее или тяжелое.
Наркомания: термин, используемый для обозначения наиболее тяжелой, хронической стадии расстройства, связанного с употреблением психоактивных веществ, при которой происходит значительная потеря самоконтроля, о чем свидетельствует компульсивный прием наркотиков, несмотря на желание прекратить их прием. В DSM-5 термин «зависимость» является синонимом классификации тяжелого расстройства, связанного с употреблением психоактивных веществ.
Вещества, которыми злоупотребляют (от алкоголя до психостимуляторов), изначально употребляются регулярно в соответствии с их положительными подкрепляющими свойствами. Важно отметить, что неоднократное воздействие полезных веществ запускает цепочку вторичных подкрепляющих событий, в результате чего сигналы и контексты, связанные с употреблением наркотиков, сами могут стать подкрепляющими и тем самым способствовать продолжению употребления и возможному злоупотреблению выбранными веществами. ...
Важным аспектом подкрепления, имеющим большое значение для процесса зависимости (и особенно рецидива), является вторичное подкрепление (Stewart, 1992). Вторичные подкрепления (во многих случаях также рассматриваемые как условные подкрепления), вероятно, управляют большинством процессов подкрепления у людей. В конкретном случае наркотической [наркомании] сигналы и контексты, которые тесно и неоднократно связаны с употреблением наркотиков, часто сами по себе становятся подкрепляющими... Фундаментальная часть теории зависимости Робинсона и Берриджа, основанной на стимулировании и сенсибилизации, утверждает, что стимулирующая ценность или привлекательность Природа таких процессов вторичного подкрепления, помимо самих первичных подкреплений, может сохраняться и даже становиться сенсибилизированной с течением времени в связи с развитием наркозависимости (Robinson and Berridge, 1993). ...
Негативное подкрепление — это особое состояние, связанное с усилением поведенческих реакций, которые прекращают действие некоторого продолжающегося (предположительно аверсивного) стимула. В этом случае мы можем определить негативное подкрепление как мотивационный стимул, который усиливает такую реакцию «побега». Исторически, что касается наркозависимости, это явление постоянно наблюдалось у людей, когда наркотики употреблялись самостоятельно для удовлетворения мотивационной потребности в состоянии абстиненции (Wikler, 1952).
Когда Павловскому CS+ приписывается стимулирующая значимость, это не только вызывает «желание» его UCS, но часто сам сигнал становится очень привлекательным – даже до иррациональной степени. Эта привлекательность сигнала — еще одна характерная черта значимости стимула. На CS становится трудно не смотреть (Wiers & Stacy, 2006; Hickey et al., 2010a; Piech et al., 2010; Anderson et al., 2011). CS даже приобретает некоторые стимулирующие свойства, аналогичные UCS. Привлекательный КС часто вызывает поведенчески мотивированный подход, а иногда человек может даже попытаться «потребить» КС в некотором роде как его UCS (например, есть, пить, курить, заниматься сексом, принимать как наркотик). «Желание» CS может также превратить ранее нейтральный стимул в инструментальное условное подкрепление, так что человек будет работать над получением сигнала (однако существуют и альтернативные психологические механизмы для условного подкрепления).
Важная цель нейробиологии зависимостей в будущем — понять, как интенсивная мотивация становится узко сфокусированной на конкретной цели. Предполагается, что зависимость отчасти возникает из-за чрезмерной выраженности стимулов, создаваемых сенсибилизированными или гиперреактивными дофаминовыми системами, которые вызывают сильное «желание» (Robinson and Berridge, 1993). Но почему одна цель становится более «желанной», чем все остальные, до конца не объяснено. У наркоманов или пациентов, получающих агонистическую стимуляцию, повторение выраженной стимулирующей стимуляции дофамином объясняется определенными индивидуализированными занятиями, такими как прием препарата, вызывающего привыкание, или определенные навязчивые действия. В ситуациях с вознаграждением по Павлову некоторые сигналы вознаграждения становятся более «желанными» больше, чем другие, как мощные мотивационные магниты, причем у разных людей эти сигналы различаются (Robinson et al., 2014b; Saunders and Robinson, 2013). ... Однако гедонистический эффект вполне может со временем измениться. Поскольку препарат принимался неоднократно, у восприимчивых людей могла возникнуть мезолимбическая дофаминергическая сенсибилизация, усиливающая «желание» (Leyton and Vezina, 2013; Lodge and Grace, 2011; Wolf and Ferrario, 2010), даже если опиоидные гедонические механизмы подверглись негативной регуляции. из-за постоянной лекарственной стимуляции, вызывающей «любящую» толерантность. Стимулирующая сенсибилизация может вызвать зависимость, избирательно усиливая вызванное сигналом «желание» снова принять наркотик, и таким образом мощно вызвать мотивацию, даже если наркотик станет менее приятным (Robinson and Berridge, 1993).
[1]