stringtranslate.com

Система вознаграждений

Примеры основных вознаграждений. [1] По часовой стрелке сверху слева: вода, еда, родительская забота и секс.

Система вознаграждения (мезокортиколимбический контур) представляет собой группу нейронных структур, отвечающих за стимульную значимость (то есть «желание»; желание или тяга к вознаграждению и мотивации ), ассоциативное обучение (в первую очередь положительное подкрепление и классическое обусловливание ) и положительно-валентные эмоции , особенно те, в которых удовольствие является основным компонентом (например, радость , эйфория и экстаз ). [2] [3] Вознаграждение является привлекательным и мотивирующим свойством стимула, которое вызывает аппетитное поведение, также известное как поведение приближения и консуматорное поведение. [2] Вознаграждающий стимул был описан как «любой стимул, объект, событие, деятельность или ситуация, которые имеют потенциал заставить нас приблизиться и потребить его, по определению являются вознаграждением». [2] В оперантном обусловливании вознаграждающие стимулы функционируют как положительные подкрепления ; [1] однако обратное утверждение также верно: положительные подкрепления вознаграждают. [1] [4] Система вознаграждения мотивирует животных приближаться к стимулам или заниматься поведением, которое повышает приспособленность (секс, высококалорийная пища и т. д.). Выживание большинства видов животных зависит от максимизации контакта с полезными стимулами и минимизации контакта с вредными стимулами. Познание вознаграждения служит для увеличения вероятности выживания и размножения, вызывая ассоциативное обучение, вызывая поведение приближения и потребления и запуская позитивно-валентные эмоции. [1] Таким образом, вознаграждение - это механизм, который развился, чтобы помочь повысить адаптивную приспособленность животных. [5] При наркотической зависимости определенные вещества чрезмерно активируют цепь вознаграждения, что приводит к компульсивному поведению поиска веществ в результате синаптической пластичности в цепи. [6]

Первичные вознаграждения — это класс стимулов вознаграждения, которые способствуют выживанию человека и его потомства , и они включают гомеостатические (например, вкусная еда ) и репродуктивные (например, сексуальный контакт и родительские инвестиции ) вознаграждения. [2] [7] Внутренние вознаграждения — это безусловные вознаграждения, которые привлекательны и мотивируют поведение, поскольку они по своей сути приятны. [2] Внешние вознаграждения (например, деньги или наблюдение за победой любимой спортивной команды) — это условные вознаграждения, которые привлекательны и мотивируют поведение, но по своей сути не приятны. [2] [8] Внешние вознаграждения получают свою мотивационную ценность в результате усвоенной ассоциации (т. е. обусловленности) с внутренними вознаграждениями. [2] Внешние вознаграждения также могут вызывать удовольствие (например, эйфорию от выигрыша больших денег в лотерею) после классического обусловления внутренними вознаграждениями. [2]

Определение

В нейронауке система вознаграждения представляет собой совокупность мозговых структур и нейронных путей, которые отвечают за познание, связанное с вознаграждением, включая ассоциативное обучение (в первую очередь классическое обусловливание и оперантное подкрепление ), стимульную значимость (т. е. мотивацию и «желание», желание или тягу к вознаграждению) и положительно-валентные эмоции , в частности эмоции, связанные с удовольствием (т. е. гедонистическую «симпатию»). [1] [3]

Термины, которые обычно используются для описания поведения, связанного с компонентом «желания» или желания вознаграждения, включают аппетитное поведение, поведение приближения, подготовительное поведение, инструментальное поведение, предвосхищающее поведение и поиск. [9] Термины, которые обычно используются для описания поведения, связанного с компонентом «симпатии» или удовольствия вознаграждения, включают консуматорное поведение и поведение взятия. [9]

Три основные функции вознаграждений заключаются в их способности:

  1. производить ассоциативное обучение (т.е. классическое обусловливание и оперантное подкрепление ); [1]
  2. влияют на принятие решений и побуждают к поведению приближения (путем присвоения мотивационной значимости поощрительным стимулам); [1]
  3. вызывать позитивно-оцененные эмоции, особенно удовольствие. [1]

Нейроанатомия

Обзор

Структуры мозга, составляющие систему вознаграждения, расположены в основном в кортико-базальных ганглиях-таламо-кортикальной петле ; [10] часть петли, состоящая из базальных ганглиев, управляет активностью в системе вознаграждения. [10] Большинство путей, которые соединяют структуры в системе вознаграждения, представляют собой глутаматергические интернейроны , ГАМКергические средние шипиковые нейроны (MSN) и дофаминергические проекционные нейроны , [10] [11] хотя другие типы проекционных нейронов вносят свой вклад (например, орексинергические проекционные нейроны). Система вознаграждения включает в себя вентральную область покрышки , вентральный полосатый участок (то есть прилежащее ядро ​​и обонятельный бугорок ), дорсальный полосатый участок (то есть хвостатое ядро ​​и скорлупа ), черную субстанцию ​​(то есть компактную и ретикулярную части ), префронтальную кору , переднюю поясную кору , островковую кору , гиппокамп , гипоталамус (в частности, орексинергическое ядро ​​в латеральном гипоталамусе ), таламус (множественные ядра), субталамическое ядро , бледный шар (как наружный, так и внутренний ), вентральный бледный шар , парабрахиальное ядро , миндалевидное тело и оставшуюся часть расширенной миндалевидной железы . [3] [10] [12] [13] [14] Дорсальное ядро ​​шва и мозжечок, по-видимому, модулируют некоторые формы познания, связанного с вознаграждением (например, ассоциативное обучение , мотивационную значимость и положительные эмоции ), а также поведение. [15] [16] [17] Латеродорсальное ядро ​​покрышки (LDT) , ножкомостовое ядро ​​(PPTg) и латеральная габенула (LHb) (как напрямую, так и косвенно через ростромедиальное ядро ​​покрышки (RMTg) ) также способны вызывать аверсивную значимость и стимульную значимость.через свои проекции в вентральную область покрышки (VTA). [18] LDT и PPTg оба посылают глутаминэргические проекции в VTA, которые синапсируют на дофаминергических нейронах, оба из которых могут вызывать стимульную значимость. LHb посылает глутаминэргические проекции, большинство из которых синапсируют на ГАМКергических нейронах RMTg, которые, в свою очередь, вызывают торможение дофаминергических нейронов VTA, хотя некоторые проекции LHb заканчиваются на интернейронах VTA. Эти проекции LHb активируются как аверсивными стимулами, так и отсутствием ожидаемого вознаграждения, и возбуждение LHb может вызывать аверсию. [19] [20] [21]

Большинство дофаминовых путей (т. е. нейронов, которые используют нейротрансмиттер дофамин для связи с другими нейронами), которые выступают из вентральной области покрышки, являются частью системы вознаграждения; [10] в этих путях дофамин действует на D1-подобные рецепторы или D2-подобные рецепторы, чтобы либо стимулировать (D1-подобные), либо ингибировать (D2-подобные) выработку цАМФ . [22] ГАМКергические средние шипиковые нейроны полосатого тела также являются компонентами системы вознаграждения. [10] Глутаматергические проекционные ядра в субталамическом ядре, префронтальной коре, гиппокампе, таламусе и миндалевидном теле связаны с другими частями системы вознаграждения через глутаматные пути. [10] Медиальный пучок переднего мозга , представляющий собой набор множества нейронных путей, которые опосредуют вознаграждение за стимуляцию мозга (т. е. вознаграждение, получаемое в результате прямой электрохимической стимуляции латерального гипоталамуса ), также является компонентом системы вознаграждения. [23]

Существуют две теории относительно активности прилежащего ядра и генерации симпатии и желания. Гипотеза торможения (или гиперполяризации) предполагает, что прилежащее ядро ​​оказывает тоническое ингибирующее действие на нижестоящие структуры, такие как вентральный паллидум, гипоталамус или вентральная область покрышки, и что при торможении MSN в прилежащем ядре (NAcc) эти структуры возбуждаются, «высвобождая» поведение, связанное с вознаграждением. В то время как агонисты рецепторов ГАМК способны вызывать как реакции «нравится», так и «хочет» в прилежащем ядре, глутаминергические входы из базолатеральной миндалины , вентрального гиппокампа и медиальной префронтальной коры могут управлять стимульной заметностью. Кроме того, в то время как большинство исследований показывают, что нейроны NAcc снижают активность в ответ на вознаграждение, ряд исследований показывают противоположную реакцию. Это привело к предложению гипотезы растормаживания (или деполяризации), которая предполагает, что возбуждение нейронов NAcc или, по крайней мере, определенных подгрупп, управляет поведением, связанным с вознаграждением. [3] [24] [25]

После почти 50 лет исследований вознаграждения за стимуляцию мозга эксперты подтвердили, что десятки участков мозга будут поддерживать внутричерепную самостимуляцию . Регионы включают латеральный гипоталамус и медиальные пучки переднего мозга, которые особенно эффективны. Стимуляция там активирует волокна, которые образуют восходящие пути; восходящие пути включают мезолимбический дофаминовый путь , который выступает из вентральной области покрышки в прилежащее ядро . Существует несколько объяснений того, почему мезолимбический дофаминовый путь является центральным для схем, опосредующих вознаграждение. Во-первых, наблюдается заметное увеличение высвобождения дофамина из мезолимбического пути, когда животные занимаются внутричерепной самостимуляцией. [5] Во-вторых, эксперименты последовательно показывают, что вознаграждение за стимуляцию мозга стимулирует усиление путей, которые обычно активируются естественными вознаграждениями , а вознаграждение за наркотики или внутричерепная самостимуляция могут вызывать более мощную активацию центральных механизмов вознаграждения, поскольку они активируют центр вознаграждения напрямую, а не через периферические нервы . [5] [26] [27] В-третьих, когда животным вводят вызывающие привыкание наркотики или они занимаются естественным вознаграждающим поведением, таким как кормление или сексуальная активность, происходит заметное высвобождение дофамина в прилежащем ядре. [5] Однако дофамин — не единственное вознаграждающее соединение в мозге.

Ключевой путь

Диаграмма, показывающая некоторые ключевые компоненты мезокортиколимбической («вознаграждающей») цепи

Вентральная область покрышки

Полосатое тело (прилежащее ядро)

Префронтальная кора

Гиппокамп

Миндалевидное тело

Центры удовольствия

Удовольствие является компонентом вознаграждения, но не все вознаграждения являются приятными (например, деньги не вызывают удовольствия, если эта реакция не обусловлена). [2] Стимулы, которые по своей природе приятны и, следовательно, привлекательны, известны как внутренние вознаграждения , тогда как стимулы, которые привлекательны и мотивируют поведение подхода, но по своей сути не являются приятными, называются внешними вознаграждениями . [2] Внешние вознаграждения (например, деньги) являются вознаграждающими в результате усвоенной ассоциации с внутренним вознаграждением. [2] Другими словами, внешние вознаграждения действуют как мотивационные магниты, которые вызывают реакции «желания», но не «приязни», как только они были приобретены. [2]

Система вознаграждения содержит центры удовольствия  или гедонистические горячие точки , т. е. структуры мозга, которые опосредуют удовольствие или реакции «нравится» от внутренних вознаграждений. По состоянию на октябрь 2017 года гедонистические горячие точки были идентифицированы в субкомпартментах внутри оболочки прилежащего ядра , вентрального паллидума , парабрахиального ядра , орбитофронтальной коры (ОФК) и островковой коры . [3] [14] [36] Горячая точка внутри оболочки прилежащего ядра расположена в ростродорсальном квадранте медиальной оболочки, в то время как гедонистическая холодная точка расположена в более задней области. Задний вентральный паллидум также содержит гедонистическую горячую точку, в то время как передний вентральный паллидум содержит гедонистическую холодную точку. У крыс микроинъекции опиоидов , эндоканнабиноидов и орексина способны усиливать реакции симпатии в этих горячих точках. [3] Было показано, что гедонистические горячие точки, расположенные в передней части OFC и задней части островка, реагируют на орексин и опиоиды у крыс, как и перекрывающаяся гедонистическая холодная точка в передней части островка и задней части OFC. [36] С другой стороны, было показано, что горячая точка парабрахиального ядра реагирует только на агонисты бензодиазепиновых рецепторов. [3]

Гедонистические горячие точки функционально связаны, в том смысле, что активация одной горячей точки приводит к привлечению других, что индексируется индуцированной экспрессией c -Fos , немедленного раннего гена . Более того, ингибирование одной горячей точки приводит к притуплению эффектов активации другой горячей точки. [3] [36] Поэтому одновременная активация каждой гедонистической горячей точки в системе вознаграждения считается необходимой для создания ощущения интенсивной эйфории . [37]

Желание и симпатия

Настройка аппетитивных и оборонительных реакций в оболочке прилежащего ядра (выше). Блокада AMPA требует функции D1 для того, чтобы вызывать мотивированное поведение, независимо от валентности, и функции D2 для того, чтобы вызывать оборонительное поведение. С другой стороны, агонизм ГАМК не требует функции дофаминовых рецепторов (ниже). Расширение анатомических областей, которые вызывают оборонительное поведение в условиях стресса, и аппетитивное поведение в домашней обстановке, вызванное антагонизмом AMPA. Эта гибкость менее очевидна при агонизме ГАМК. [24]

Стимулирующая заметность — это атрибут «желания» или «стремления», включающий мотивационный компонент, который назначается поощрительному стимулу оболочкой прилежащего ядра (оболочкой ПЯ). [2] [38] [39] Степень нейротрансмиссии дофамина в оболочку ПЯ из мезолимбического пути тесно связана с величиной стимулирующей заметности для поощрительных стимулов. [38]

Активация дорсоростральной области прилежащего ядра коррелирует с увеличением желания без сопутствующего увеличения симпатии. [40] Однако дофаминергическая нейротрансмиссия в оболочке прилежащего ядра отвечает не только за привлекательное мотивационное выделение (т. е. стимулирующее выделение) в сторону вознаграждающих стимулов, но и за аверсивное мотивационное выделение, которое направляет поведение в сторону от нежелательных стимулов. [9] [41] [42] В дорсальном полосатом теле активация D1, экспрессирующих MSN, вызывает привлекательное стимулирующее выделение, в то время как активация D2, экспрессирующих MSN, вызывает отвращение. В NAcc такая дихотомия не столь четкая, и активация как D1, так и D2 MSN достаточна для усиления мотивации, [43] [44], вероятно, посредством растормаживания VTA посредством ингибирования вентрального паллидума. [45] [46]

Теория сенсибилизации стимула Робинсона и Берриджа 1993 года предполагает, что вознаграждение содержит разделяемые психологические компоненты: желание (стимул) и симпатия (удовольствие). Чтобы объяснить увеличение контакта с определенным стимулом, таким как шоколад, действуют два независимых фактора — наше желание иметь шоколад (желание) и эффект удовольствия от шоколада (симпатия). По мнению Робинсона и Берриджа, желание и симпатия — это два аспекта одного и того же процесса, поэтому вознаграждения обычно желаемы и любимы в одинаковой степени. Однако желание и симпатия также изменяются независимо при определенных обстоятельствах. Например, крысы, которые не едят после получения дофамина (испытывая потерю желания есть), ведут себя так, как будто они все еще любят еду. В другом примере активированные электроды самостимуляции в латеральном гипоталамусе крыс повышают аппетит, но также вызывают более неблагоприятные реакции на вкусы, такие как сахар и соль; по-видимому, стимуляция увеличивает желание, но не симпатию. Такие результаты показывают, что система вознаграждения крыс включает независимые процессы желания и симпатии. Предполагается, что компонент желания контролируется дофаминергическими путями , тогда как компонент симпатии контролируется системами опиат-ГАМК-эндоканнабиноиды. [5]

Система антивознаграждения

Koobs & Le Moal предположили, что существует отдельная схема, ответственная за ослабление поведения, направленного на получение вознаграждения, которую они назвали анти-вознаграждающей схемой. Этот компонент действует как тормоз на вознаграждающей схеме, тем самым предотвращая чрезмерное стремление к еде, сексу и т. д. Эта схема включает в себя несколько частей миндалевидного тела (ядро ложа конечной полоски, центральное ядро), прилежащее ядро ​​и сигнальные молекулы, включая норадреналин, кортикотропин-рилизинг-фактор и динорфин. [47] Также предполагается, что эта схема опосредует неприятные компоненты стресса и, таким образом, считается вовлеченной в зависимость и абстиненцию. В то время как вознаграждающая схема опосредует первоначальное положительное подкрепление, участвующее в развитии зависимости, именно анти-вознаграждающая схема, которая позже доминирует через отрицательное подкрепление, мотивирует стремление к вознаграждающим стимулам. [48]

Обучение

Вознаграждающие стимулы могут стимулировать обучение как в форме классического обусловливания (обусловливание Павлова) , так и оперантного обусловливания (инструментальное обусловливание) . В классическом обусловливании вознаграждение может действовать как безусловный стимул, который, будучи связанным с условным стимулом, заставляет условный стимул вызывать как мышечно-скелетные (в форме простого поведения приближения и избегания), так и вегетативные реакции. В оперантном обусловливании вознаграждение может действовать как подкрепление, поскольку оно увеличивает или поддерживает действия, которые ведут к нему самому. [1] Выученные поведения могут быть или не быть чувствительными к ценности результатов, к которым они приводят; поведения, которые чувствительны к обусловленности результата при выполнении действия, а также к ценности результата, являются целенаправленными , в то время как вызванные действия, которые нечувствительны к обусловленности или ценности, называются привычками . [49] Считается, что это различие отражает две формы обучения: свободное от моделей и основанное на моделях. Обучение без моделей включает в себя простое кэширование и обновление значений. Напротив, обучение на основе моделей подразумевает хранение и построение внутренней модели событий, которая позволяет делать выводы и гибкие прогнозы. Хотя павловское обусловливание обычно считается свободным от моделей, значимость стимула, приписываемая условному стимулу, является гибкой по отношению к изменениям во внутренних мотивационных состояниях. [50]

Отдельные нейронные системы отвечают за изучение ассоциаций между стимулами и результатами, действиями и результатами, а также стимулами и реакциями. Хотя классическое обусловливание не ограничивается системой вознаграждения, улучшение инструментальной производительности стимулами (т. е. павловско-инструментальный перенос ) требует прилежащего ядра. Привычное и целенаправленное инструментальное обучение зависят от латерального и медиального полосатого тела соответственно. [ 49]

Во время инструментального обучения противоположные изменения в соотношении рецепторов AMPA к NMDA и фосфорилированному ERK происходят в MSN типа D 1 и D 2 , которые составляют прямой и непрямой пути соответственно. [51] [52] Эти изменения синаптической пластичности и сопутствующее обучение зависят от активации стриарных рецепторов D1 и NMDA. Внутриклеточный каскад, активируемый рецепторами D1, включает в себя привлечение протеинкиназы A и посредством результирующего фосфорилирования DARPP-32 , ингибирование фосфатаз, которые дезактивируют ERK. Рецепторы NMDA активируют ERK через другой, но взаимосвязанный путь Ras-Raf-MEK-ERK . Одна только активация ERK, опосредованная NMDA, является самоограниченной, поскольку активация NMDA также ингибирует ингибирование дезактивирующих ERK фосфатаз, опосредованное PKA. Однако, когда каскады D1 и NMDA активируются совместно, они работают синергически, и результирующая активация ERK регулирует синаптическую пластичность в форме реструктуризации шипиков, транспорта рецепторов AMPA, регуляции CREB и повышения клеточной возбудимости посредством ингибирования Kv4.2 . [53] [54] [55]

Расстройства

Зависимость

ΔFosB (DeltaFosB) – фактор транскрипции генасверхэкспрессия в средних шипиковых нейронах типа D1 прилежащего ядра является важнейшим общим фактором практически среди всех форм зависимости (т. е. поведенческих зависимостей и наркозависимостей ), который вызывает связанное с зависимостью поведение и нейронную пластичность . [56] [57] [58] [59] В частности, ΔFosB способствует самоупотреблению , сенсибилизации вознаграждением и эффектам перекрестной сенсибилизации вознаграждением среди определенных наркотических веществ и видов поведения, вызывающих зависимость. [56] [57] [58] [60] [61] Также известно, что определенные эпигенетические модификации хвостов гистоновых белков (т. е. модификации гистонов) в определенных областях мозга играют решающую роль в молекулярной основе зависимостей . [ 59] [62] [63] [64]

Наркотики и поведение, вызывающие зависимость , вознаграждают и подкрепляют (т.е. вызывают привыкание ) из-за их воздействия на дофаминовый путь вознаграждения . [13] [65]

Латеральный гипоталамус и медиальный передний мозговой пучок были наиболее часто изучаемым местом вознаграждения за стимуляцию мозга, особенно в исследованиях влияния наркотиков на вознаграждение за стимуляцию мозга. [66] Нейротрансмиттерная система, которая была наиболее четко идентифицирована с действием наркотических веществ, вызывающих привыкание, — это мезолимбическая дофаминовая система с ее эфферентными мишенями в прилежащем ядре и ее локальными ГАМКергическими афферентами. Действия амфетамина и кокаина, связанные с вознаграждением, находятся в дофаминергических синапсах прилежащего ядра и, возможно, медиальной префронтальной коры . Крысы также обучаются нажимать рычаг для инъекций кокаина в медиальную префронтальную кору, что работает за счет увеличения оборота дофамина в прилежащем ядре. [67] [68] Никотин, вводимый непосредственно в прилежащее ядро, также усиливает локальное высвобождение дофамина, предположительно, за счет пресинаптического воздействия на дофаминергические окончания этой области. Никотиновые рецепторы локализуются в телах дофаминергических клеток, а местные инъекции никотина усиливают дофаминергическую активацию клеток, что имеет решающее значение для никотинового вознаграждения. [69] [70] Некоторые дополнительные вызывающие привыкание препараты также, вероятно, снижают выход средних шипиковых нейронов в результате, несмотря на активацию дофаминергических проекций. Для опиатов участок с самым низким порогом для эффектов вознаграждения включает воздействие на ГАМКергические нейроны в вентральной тегментальной области , вторичном участке вознаграждающих опиатов действий на средние шипиковые выходные нейроны прилежащего ядра. Таким образом, следующее составляет ядро ​​в настоящее время характеризуемой схемы вознаграждения за наркотики; ГАМКергические афференты к мезолимбическим дофаминовым нейронам (первичный субстрат опиатного вознаграждения), сами мезолимбические дофаминовые нейроны (первичный субстрат психомоторного стимулирующего вознаграждения) и ГАМКергические эфференты к мезолимбическим дофаминовым нейронам (вторичный участок опиатного вознаграждения). [66]

Мотивация

Дисфункциональная мотивационная заметность проявляется в ряде психиатрических симптомов и расстройств. Ангедония , традиционно определяемая как сниженная способность испытывать удовольствие, была пересмотрена как отражение притупленной стимульной заметности, поскольку большинство ангедонических популяций демонстрируют нетронутую «симпатию». [71] [72] С другой стороны, повышенная стимульная заметность, суженная для определенных стимулов, характерна для поведенческих и наркотических зависимостей. В случае страха или паранойи дисфункция может заключаться в повышенной аверсивной заметности . [73] В современной литературе ангедония связана с предложенными двумя формами удовольствия: «предвосхищающим» и «консумматорным».

Исследования нейровизуализации при диагнозах, связанных с ангедонией, выявили снижение активности в OFC и вентральном полосатом теле. [74] В одном метаанализе сообщалось, что ангедония связана с пониженной нейронной реакцией на ожидание вознаграждения в хвостатом ядре, скорлупе, прилежащем ядре и медиальной префронтальной коре (mPFC). [75]

Расстройства настроения

Определенные типы депрессии связаны со сниженной мотивацией, оцениваемой по готовности прилагать усилия ради вознаграждения. Эти аномалии предварительно связывают со сниженной активностью в областях полосатого тела, и хотя предполагается, что дофаминергические аномалии играют определенную роль, большинство исследований, изучающих функцию дофамина при депрессии, сообщают о противоречивых результатах. [76] [77] Хотя посмертные и нейровизуализационные исследования обнаружили аномалии во многих регионах системы вознаграждения, лишь немногие результаты последовательно воспроизводятся. В некоторых исследованиях сообщается о сниженной активности NAcc, гиппокампа, медиальной префронтальной коры (mPFC) и орбитофронтальной коры (OFC), а также о повышенной активности базолатеральной миндалины и субгенуальной поясной извилины (sgACC) во время задач, связанных с вознаграждением или положительными стимулами. Эти нейровизуализационные аномалии дополняются небольшими посмертными исследованиями, но то немногое исследование, которое было сделано, предполагает снижение возбуждающих синапсов в mPFC. [78] Сниженная активность в mPFC во время задач, связанных с вознаграждением, по-видимому, локализуется в более дорсальных областях (т. е. в прегенуальной поясной извилине ), в то время как более вентральная sgACC гиперактивна при депрессии. [79]

Попытки исследовать лежащую в основе нейронную схему в моделях животных также дали противоречивые результаты. Обычно используются две парадигмы для моделирования депрессии, хронического социального поражения (CSDS) и хронического легкого стресса (CMS), хотя существует множество других. CSDS вызывает снижение предпочтения сахарозы, снижение социальных взаимодействий и увеличение неподвижности в тесте принудительного плавания. CMS аналогичным образом снижает предпочтение сахарозы и поведенческое отчаяние, оцениваемое с помощью тестов подвешивания за хвост и принудительного плавания. Животные, восприимчивые к CSDS, демонстрируют повышенную фазовую активацию VTA, а ингибирование проекций VTA-NAcc ослабляет поведенческие дефициты, вызванные CSDS. [80] Однако ингибирование проекций VTA - mPFC усугубляет социальную отчужденность. С другой стороны, CMS-ассоциированное снижение предпочтения сахарозы и неподвижности ослаблялось и усугублялось возбуждением и ингибированием VTA соответственно. [81] [82] Хотя эти различия могут быть обусловлены различными протоколами стимуляции или плохими трансляционными парадигмами, переменные результаты могут также заключаться в гетерогенной функциональности областей, связанных с вознаграждением. [83]

Оптогенетическая стимуляция mPFC в целом производит антидепрессантные эффекты. Этот эффект, по-видимому, локализован в гомологе pgACC (прелимбической коре) грызунов, поскольку стимуляция гомолога sgACC (инфралимбической коре) грызунов не производит поведенческих эффектов. Более того, глубокая стимуляция мозга в инфралимбической коре, которая, как считается, имеет ингибирующий эффект, также производит антидепрессантный эффект. Это открытие согласуется с наблюдением, что фармакологическое ингибирование инфралимбической коры ослабляет депрессивное поведение. [83]

Шизофрения

Шизофрения связана с дефицитом мотивации, обычно группируемым под другими негативными симптомами, такими как сниженная спонтанная речь . Часто сообщается, что опыт «симпатии» остается нетронутым, [84] как поведенческим, так и нейронным, хотя результаты могут быть специфичны для определенных стимулов, таких как денежное вознаграждение. [85] Кроме того, неявное обучение и простые задачи, связанные с вознаграждением, также остаются нетронутыми при шизофрении. [86] Скорее, дефицит в системе вознаграждения становится очевидным во время задач, связанных с вознаграждением, которые являются когнитивно сложными. Эти дефициты связаны как с аномальной активностью полосатого тела и ОФК, так и с аномалиями в областях, связанных с когнитивными функциями, такими как дорсолатеральная префронтальная кора (ДЛПФК). [87]

Синдром дефицита внимания и гиперактивности

У людей с СДВГ основные аспекты системы вознаграждения неактивны, что затрудняет получение вознаграждения от регулярных действий. Люди с расстройством испытывают всплеск мотивации после того, как высокостимулирующее поведение запускает выброс дофамина. После этого всплеска и вознаграждения возвращение к исходным уровням приводит к немедленному падению мотивации. [88]

Нарушения дофаминергической и серотонинергической функции считаются ключевыми факторами СДВГ. [89] Эти нарушения могут привести к исполнительной дисфункции, такой как нарушение регуляции обработки вознаграждения и мотивационная дисфункция, включая ангедонию. [90]

История

Ящик Скиннера

Первая подсказка о наличии системы вознаграждения в мозге появилась благодаря случайному открытию Джеймса Олдса и Питера Милнера в 1954 году. Они обнаружили, что крысы будут выполнять такие действия, как нажатие на рычаг, чтобы нанести кратковременный импульс электрической стимуляции определенным участкам мозга. Это явление называется внутричерепной самостимуляцией или вознаграждением за стимуляцию мозга . Обычно крысы нажимают на рычаг сотни или тысячи раз в час, чтобы получить эту стимуляцию мозга, останавливаясь только тогда, когда они истощаются. При попытке научить крыс решать задачи и проходить лабиринты, стимуляция определенных областей мозга, где была обнаружена стимуляция, казалось, доставляла животным удовольствие. Они попробовали сделать то же самое с людьми, и результаты были похожими. Объяснение того, почему животные проявляют поведение, которое не имеет никакой ценности для выживания ни их самих, ни их вида, заключается в том, что стимуляция мозга активирует систему, лежащую в основе вознаграждения. [91]

В фундаментальном открытии, сделанном в 1954 году, исследователи Джеймс Олдс и Питер Милнер обнаружили, что низковольтная электрическая стимуляция определенных областей мозга крысы действовала как вознаграждение при обучении животных проходить лабиринты и решать задачи. [92] [ не удалось проверить ] [93] Казалось, что стимуляция этих частей мозга доставляла животным удовольствие, [92] и в более поздних работах люди сообщали о приятных ощущениях от такой стимуляции. [ необходима цитата ] Когда крыс тестировали в ящиках Скиннера , где они могли стимулировать систему вознаграждения, нажимая на рычаг, крысы нажимали в течение нескольких часов. [93] Исследования в течение следующих двух десятилетий установили, что дофамин является одним из основных химических веществ, помогающих нейронной сигнализации в этих областях, и было высказано предположение, что дофамин является «химическим веществом удовольствия» мозга. [94]

Иван Павлов был психологом, который использовал систему вознаграждения для изучения классического обусловливания . Павлов использовал систему вознаграждения, вознаграждая собак едой после того, как они слышали звонок или другой стимул. Павлов вознаграждал собак так, чтобы собаки ассоциировали еду, вознаграждение, со звонком, стимулом. [95] Эдвард Л. Торндайк использовал систему вознаграждения для изучения оперантного обусловливания. Он начал с того, что поместил кошек в коробку-головоломку и поместил еду снаружи коробки, так что кошка хотела сбежать. Кошки пытались выбраться из коробки-головоломки, чтобы добраться до еды. Хотя кошки съедали еду после того, как сбегали из коробки, Торндайк узнал, что кошки пытались сбежать из коробки без вознаграждения едой. Торндайк использовал вознаграждение едой и свободой, чтобы стимулировать систему вознаграждения кошек. Торндайк использовал это, чтобы увидеть, как кошки научились сбегать из коробки. [96] Совсем недавно Иван Де Араужо и его коллеги использовали питательные вещества внутри кишечника, чтобы стимулировать систему вознаграждения через блуждающий нерв. [97]

Другие виды

Животные быстро учатся нажимать на рычаг, чтобы получить инъекцию опиатов непосредственно в покрышку среднего мозга или прилежащее ядро . Те же животные не работают, чтобы получить опиаты, если дофаминергические нейроны мезолимбического пути инактивированы. С этой точки зрения животные, как и люди, участвуют в поведении, которое увеличивает выброс дофамина.

Кент Берридж , исследователь в области аффективной нейронауки , обнаружил, что сладкий ( нравится  ) и горький ( не нравится  ) вкусы вызывают различные орофациальные выражения , и эти выражения были одинаково продемонстрированы новорожденными людьми, орангутанами и крысами. Это было доказательством того, что удовольствие (в частности, симпатия ) имеет объективные характеристики и было по сути одинаковым у разных видов животных. Большинство исследований нейронауки показали, что чем больше дофамина высвобождается вознаграждением, тем оно эффективнее. Это называется гедонистическим воздействием, которое может быть изменено усилием для получения вознаграждения и самим вознаграждением. Берридж обнаружил, что блокирование дофаминовых систем, по-видимому, не изменило положительную реакцию на что-то сладкое (измеряемую по выражению лица). Другими словами, гедонистическое воздействие не менялось в зависимости от количества сахара. Это опровергло общепринятое предположение о том, что дофамин опосредует удовольствие. Даже при более интенсивных изменениях дофамина данные, казалось, оставались неизменными. [98] Однако клиническое исследование, проведенное в январе 2019 года, в котором оценивалось влияние предшественника дофамина ( леводопы ), антагониста ( рисперидона ) и плацебо на реакцию вознаграждения на музыку, включая степень удовольствия, испытываемого во время музыкального озноба , измеряемую по изменениям электродермальной активности , а также субъективным оценкам, показало, что манипулирование нейротрансмиссией дофамина двунаправленно регулирует познание удовольствия (в частности, гедонистическое воздействие музыки ) у людей. [99] [100] Это исследование продемонстрировало, что повышенная нейротрансмиссия дофамина действует как непременное условие для приятных гедонистических реакций на музыку у людей. [99] [100]

Берридж разработал гипотезу значимости стимула , чтобы рассмотреть аспект желания вознаграждения. Она объясняет компульсивное употребление наркотиков наркоманами, даже когда наркотик больше не вызывает эйфории, и тягу, испытываемую даже после того, как человек закончил проходить через абстиненцию. Некоторые наркоманы реагируют на определенные стимулы, включающие нейронные изменения, вызванные наркотиками. Эта сенсибилизация в мозге похожа на эффект дофамина, потому что возникают реакции желания и симпатии . Мозг и поведение человека и животных испытывают схожие изменения в отношении систем вознаграждения, потому что эти системы настолько заметны. [98]

Смотрите также

Ссылки

  1. ^ abcdefghi Schultz W (2015). «Нейрональное вознаграждение и сигналы принятия решений: от теорий к данным». Physiological Reviews . 95 (3): 853–951. doi :10.1152/physrev.00023.2014. PMC  4491543 . PMID  26109341.Награды в оперантном обусловливании являются положительными подкрепителями. ... Оперантное поведение дает хорошее определение наградам. Все, что заставляет человека возвращаться за добавкой, является положительным подкрепителем и, следовательно, наградой. Хотя это дает хорошее определение, положительное подкрепление является лишь одной из нескольких функций награды. ... Награды привлекательны. Они мотивируют и заставляют нас прилагать усилия. ... Награды вызывают поведение приближения, также называемое аппетитным или подготовительным поведением, сексуальным поведением и потребительским поведением. ... Таким образом, любой стимул, объект, событие, деятельность или ситуация, которые потенциально могут заставить нас приблизиться и потребить их, по определению являются наградой. ... Наградные стимулы, объекты, события, ситуации и виды деятельности состоят из нескольких основных компонентов. Во-первых, награды имеют основные сенсорные компоненты (зрительные, слуховые, соматосенсорные, вкусовые и обонятельные) ... Во-вторых, награды заметны и, таким образом, вызывают внимание, которое проявляется в виде ориентировочных реакций. Выразительность вознаграждений вытекает из трех основных факторов, а именно, их физической интенсивности и воздействия (физическая заметность), их новизны и неожиданности (выразительность новизны/неожиданности) и их общего мотивационного воздействия, разделяемого с наказаниями (мотивационная заметность). Отдельная форма, не включенная в эту схему, стимулирующая заметность, в первую очередь касается функции дофамина в зависимости и относится только к поведению приближения (в отличие от обучения) ... В-третьих, вознаграждения имеют ценностный компонент, который определяет положительно мотивирующие эффекты вознаграждений и не содержится в сенсорных и внимающих компонентах и ​​не объясняется ими. Этот компонент отражает поведенческие предпочтения и, таким образом, является субъективным и лишь частично определяется физическими параметрами. Только этот компонент составляет то, что мы понимаем как вознаграждение. Он опосредует конкретные поведенческие подкрепляющие, генерирующие приближение и эмоциональные эффекты вознаграждений, которые имеют решающее значение для выживания и воспроизводства организма, тогда как все остальные компоненты только поддерживают эти функции. ... Награды также могут быть присущи поведению. Они контрастируют с внешними вознаграждениями, которые обеспечивают мотивацию поведения и составляют суть оперантного поведения в лабораторных тестах. Внутренние вознаграждения — это действия, которые сами по себе приятны и предпринимаются ради них самих, не являясь средством получения внешних вознаграждений. ... Внутренние вознаграждения сами по себе являются подлинными вознаграждениями, поскольку они вызывают обучение, подход и удовольствие, например, совершенствование, игра и наслаждение игрой на пианино. Хотя они могут служить для обусловливания вознаграждений более высокого порядка, они не являются обусловленными вознаграждениями более высокого порядка, поскольку достижение их свойств вознаграждения не требует сопряжения с безусловным вознаграждением. ... Эти эмоции также называются симпатией (для удовольствия) и желанием (для желания) в исследованиях зависимости и решительно поддерживают функции вознаграждения, генерирующие обучение и подход.
  2. ^ abcdefghijklm Шульц, Вольфрам (июль 2015 г.). «Нейрональное вознаграждение и сигналы принятия решений: от теорий к данным». Physiological Reviews . 95 (3): 853–951. doi :10.1152/physrev.00023.2014. PMC 4491543 . PMID  26109341. 
  3. ^ abcdefgh Berridge KC, Kringelbach ML (май 2015 г.). «Системы удовольствия в мозге». Neuron . 86 (3): 646–664. doi :10.1016/j.neuron.2015.02.018. PMC 4425246 . PMID  25950633. В префронтальной коре последние данные указывают на то, что [орбитофронтальная кора] OFC и островковая кора могут содержать собственные дополнительные горячие точки (DC Castro et al., Soc. Neurosci., аннотация). В определенных субрегионах каждой области микроинъекции, стимулирующие опиоиды или орексины, по-видимому, увеличивают количество реакций симпатии , вызванных сладкостью, подобно горячим точкам [nucleus accumbens] NAc и [ventral pallidum] VP. Успешное подтверждение гедонистических горячих точек в OFC или островке было бы важным и, возможно, релевантным для орбитофронтального средне-переднего участка, упомянутого ранее, который особенно отслеживает субъективное удовольствие от пищи у людей (Georgiadis et al., 2012; Kringelbach, 2005; Kringelbach et al., 2003; Small et al., 2001; Veldhuizen et al., 2010). Наконец, в стволе мозга участок заднего мозга около парабрахиального ядра дорсальной части моста также, по-видимому, способен вносить вклад в гедонистические приобретения функций (Söderpalm and Berridge, 2000). Механизм удовольствия в стволе мозга может показаться более удивительным, чем горячие точки переднего мозга, для любого, кто рассматривает ствол мозга как просто рефлекторный, но парабрахиальное ядро ​​моста способствует вкусу, боли и многим висцеральным ощущениям от тела, а также, как предполагается, играет важную роль в мотивации (Wu et al., 2012) и в человеческих эмоциях (особенно связанных с гипотезой соматических маркеров) (Damasio, 2010). 
  4. ^ Го, Ронг; Бёмер, Венделин; Хебарт, Мартин; Чиен, Самсон; Зоммер, Тобиас; Обермайер, Клаус; Глешер, Ян (14 декабря 2016 г.). «Взаимодействие инструментального и целенаправленного обучения модулирует представления ошибок предсказания в вентральном полосатом теле». Журнал нейронауки . 36 (50). Общество нейронауки: 12650–12660. doi : 10.1523/jneurosci.1677-16.2016 . ISSN  0270-6474. PMC 6705659. PMID 27974615  . 
  5. ^ abcde Колб, Брайан; Уишоу, Ян К. (2001). Введение в мозг и поведение (1-е изд.). Нью-Йорк: Worth. С. 438–441. ISBN 9780716751694.
  6. ^ Фонд исследований мозга и поведения (13 марта 2019 г.). «Биология зависимости». YouTube .
  7. ^ "Дофамин участвует в агрессии". Medical News Today . 15 января 2008 г. Архивировано из оригинала 23 сентября 2010 г. Получено 14 ноября 2010 г.
  8. ^ Дуарте, Изабель С.; Афонсу, Соня; Хорхе, Хелена; Кайолла, Рикардо; Феррейра, Карлос; Кастело-Бранко, Мигель (1 мая 2017 г.). «Племенная любовь: нейронные корреляты страстной активности футбольных фанатов». Социальная когнитивная и аффективная нейронаука . 12 (5): 718–728. doi : 10.1093/scan/nsx003. ПМК 5460049 . ПМИД  28338882. 
  9. ^ abc Саламоне, Джон Д.; Корреа, Мерсе (ноябрь 2012 г.). «Таинственные мотивационные функции мезолимбического дофамина». Neuron . 76 (3): 470–485. doi :10.1016/j.neuron.2012.10.021. PMC 4450094 . PMID  23141060. 
  10. ^ abcdefg Ягер Л. М., Гарсия А. Ф., Вунш А. М., Фергюсон С. М. (август 2015 г.). «Внутри и снаружи полосатого тела: роль в наркотической зависимости». Neuroscience . 301 : 529–541. doi :10.1016/j.neuroscience.2015.06.033. PMC 4523218 . PMID  26116518. [Полосатое тело] получает дофаминергические входы от вентральной области покрышки (VTA) и черной субстанции (SNr), а также глутаматергические входы от нескольких областей, включая кору, гиппокамп, миндалевидное тело и таламус (Swanson, 1982; Phillipson и Griffiths, 1985; Finch, 1996; Groenewegen et al., 1999; Britt et al., 2012). Эти глутаматергические входы контактируют на головках дендритных шипиков стриатумных ГАМКергических средних шипиковых проекционных нейронов (MSN), тогда как дофаминергические входы синаптически связаны с шейкой позвоночника, что обеспечивает важное и сложное взаимодействие между этими двумя входами в модуляции активности MSN... Следует также отметить, что существует небольшая популяция нейронов в [nucleus accumbens] NAc, которые коэкспрессируют как рецепторы D1, так и D2, хотя это в значительной степени ограничено оболочкой NAc (Bertran-Gonzalez et al., 2008). ... Нейроны в ядре NAc и подразделениях оболочки NAc также функционально различаются. Ядро NAc участвует в обработке условных стимулов, тогда как оболочка NAc более важна в обработке безусловных стимулов; Классически считается, что эти две популяции MSN стриатума оказывают противоположные эффекты на выход базальных ганглиев. Активация dMSN вызывает чистое возбуждение таламуса, что приводит к положительной кортикальной обратной связи; тем самым действуя как сигнал «вперед» для инициирования поведения. Активация iMSN, однако, вызывает чистое торможение таламической активности, что приводит к отрицательной кортикальной обратной связи и, следовательно, служит «тормозом» для торможения поведения ... также появляется все больше доказательств того, что iMSN играют роль в мотивации и зависимости (Lobo and Nestler, 2011; Grueter et al., 2013). Например, оптогенетическая активация ядра и оболочки NAc iMSN подавила развитие кокаинового CPP, тогда как селективная абляция ядра и оболочки NAc iMSN ... усилила развитие и сохранение амфетаминового CPP (Durieux et al., 2009; Lobo et al., 2010). Эти результаты свидетельствуют о том, что iMSN могут двунаправленно модулировать вознаграждение за наркотики. ... В совокупности эти данные свидетельствуют о том, что iMSN обычно действуют, сдерживая поведение, связанное с приемом наркотиков, и активация этих нейронов может фактически защищать от развития компульсивного употребления наркотиков. 
  11. ^ Тейлор СБ, Льюис К.Р., Олив МФ (2013). «Нейросхема зависимости от запрещенных психостимуляторов: острые и хронические эффекты у людей». Subst Abuse Rehabil . 4 : 29–43. doi : 10.2147/SAR.S39684 . PMC 3931688 . PMID  24648786. Регионы базальных ганглиев, которые включают дорсальный и вентральный стриатум, внутренние и внешние сегменты бледного шара, субталамическое ядро ​​и тела дофаминергических клеток в черной субстанции, в значительной степени вовлечены не только в тонкую моторику, но и в функцию [префронтальной коры] ПФК.43 Из этих регионов [прилежащее ядро] NAc (описано выше) и [дорсальный стриатум] DS (описано ниже) чаще всего исследуются в отношении зависимости. Таким образом, здесь будет упомянуто только краткое описание модуляторной роли базальных ганглиев в цепях, связанных с зависимостью. Общий выход базальных ганглиев осуществляется преимущественно через таламус, который затем проецируется обратно в ПФК, образуя кортико-стриатно-таламо-кортикальные (CSTC) петли. Три петли CSTC предложены для модуляции исполнительной функции, выбора действия и поведенческого торможения. В дорсолатеральной префронтальной цепи базальные ганглии в первую очередь модулируют идентификацию и выбор целей, включая вознаграждения.44 Цепь OFC [орбитофронтальной коры] модулирует принятие решений и импульсивность, а передняя поясная цепь модулирует оценку последствий.44 Эти цепи модулируются дофаминергическими входами из [вентральной тегментальной области] VTA, чтобы в конечном итоге направлять поведение, относящееся к зависимости, включая настойчивость и сужение поведенческого репертуара в сторону поиска наркотиков и продолжающегося употребления наркотиков, несмотря на негативные последствия.43–45 
  12. ^ Grall-Bronnec M, Sauvaget A (2014). «Использование повторяющейся транскраниальной магнитной стимуляции для модуляции тяги и зависимого поведения: критический обзор литературы по эффективности, техническим и методологическим соображениям». Neurosci. Biobehav. Rev. 47 : 592–613. doi : 10.1016/j.neubiorev.2014.10.013 . PMID  25454360. Исследования показали, что тяга подкрепляется активацией цепей вознаграждения и мотивации (McBride et al., 2006, Wang et al., 2007, Wing et al., 2012, Goldman et al., 2013, Jansen et al., 2013 и Volkow et al., 2013). По мнению этих авторов, основными вовлеченными нейронными структурами являются: прилежащее ядро, дорсальный полосатый участок, орбитофронтальная кора, передняя поясная извилина, дорсолатеральная префронтальная кора (ДЛПФК), миндалевидное тело, гиппокамп и островок.
  13. ^ ab Malenka RC, Nestler EJ, Hyman SE (2009). Sydor A, Brown RY (ред.). Молекулярная нейрофармакология: основа клинической нейронауки (2-е изд.). Нью-Йорк: McGraw-Hill Medical. стр. 365–366, 376. ISBN 978-0-07-148127-4. Нейронные субстраты, которые лежат в основе восприятия вознаграждения и феномена положительного подкрепления, представляют собой набор взаимосвязанных структур переднего мозга, называемых путями вознаграждения мозга; они включают прилежащее ядро ​​(NAc; основной компонент вентрального полосатого тела), базальный передний мозг (компоненты которого были названы расширенной миндалиной, как обсуждается далее в этой главе), гиппокамп, гипоталамус и фронтальные области коры головного мозга. Эти структуры получают богатую дофаминергическую иннервацию от вентральной области покрышки (VTA) среднего мозга. Наркотики, вызывающие зависимость, вознаграждают и подкрепляют, потому что они действуют в путях вознаграждения мозга, чтобы усилить либо высвобождение дофамина, либо эффекты дофамина в NAc или связанных структурах, или потому что они производят эффекты, подобные дофамину. ... Макроструктура, постулируемая для интеграции многих функций этой схемы, описывается некоторыми исследователями как расширенная миндалина. Считается, что расширенная миндалина включает в себя несколько базальных структур переднего мозга, которые имеют схожую морфологию, иммуноцитохимические характеристики и связность и которые хорошо подходят для опосредования аспектов функции вознаграждения; к ним относятся ядро ​​ложа терминальной полоски, центральная медиальная миндалина, оболочка NAc и подчечевичное вещество безымянной субстанции.
  14. ^ ab Richard JM, Castro DC, Difeliceantonio AG, Robinson MJ, Berridge KC (ноябрь 2013 г.). «Картирование мозговых цепей вознаграждения и мотивации: по следам Энн Келли». Neurosci. Biobehav. Rev. 37 ( 9 Pt A): 1919–1931. doi :10.1016/j.neubiorev.2012.12.008. PMC 3706488. PMID  23261404 . 
    Рисунок 3: Нейронные цепи, лежащие в основе мотивированного «желания» и гедонистической «симпатии».
  15. ^ Luo M, Zhou J, Liu Z (август 2015). «Обработка вознаграждения дорсальным ядром шва: 5-HT и далее». Learn. Mem . 22 (9): 452–460. doi :10.1101/lm.037317.114. PMC 4561406. PMID  26286655 . 
  16. ^ Moulton EA, Elman I, Becerra LR, Goldstein RZ, Borsook D (май 2014 г.). «Мозжечок и зависимость: выводы, полученные в результате нейровизуализационных исследований». Addiction Biology . 19 (3): 317–331. doi :10.1111/adb.12101. PMC 4031616. PMID  24851284 . 
  17. ^ Caligiore D, Pezzulo G, Baldassarre G, Bostan AC, Strick PL, Doya K, Helmich RC, Dirkx M, Houk J, Jörntell H, Lago-Rodriguez A, Galea JM, Miall RC, Popa T, Kishore A, Verschure PF, Zucca R, Herreros I (февраль 2017 г.). «Консенсусный документ: к системному представлению о функционировании мозжечка: взаимодействие мозжечка, базальных ганглиев и коры». Cerebellum . 16 (1): 203–229. doi :10.1007/s12311-016-0763-3. PMC 5243918 . PMID  26873754. 
  18. ^ Огава, SK; Ватабе-Учида, M (2018). «Организация системы дофамина и серотонина: анатомическое и функциональное картирование моносинаптических входов с использованием вируса бешенства». Фармакология, биохимия и поведение . 174 : 9–22. doi :10.1016/j.pbb.2017.05.001. PMID  28476484. S2CID  5089422.
  19. ^ Моралес, М; Марголис, ЭБ (февраль 2017 г.). «Вентральная область покрышки: клеточная гетерогенность, связность и поведение». Nature Reviews. Neuroscience . 18 (2): 73–85. doi :10.1038/nrn.2016.165. PMID  28053327. S2CID  10311562.
  20. ^ Ламмель, С.; Лим, Б.К.; Маленка, Р.К. (январь 2014 г.). «Награда и отвращение в гетерогенной системе дофамина среднего мозга». Нейрофармакология . 76 Pt B: 351–9. doi :10.1016/j.neuropharm.2013.03.019. PMC 3778102. PMID  23578393 . 
  21. ^ Nieh, EH; Kim, SY; Namburi, P; Tye, KM (20 мая 2013 г.). «Оптогенетическое вскрытие нейронных цепей, лежащих в основе эмоциональной валентности и мотивированного поведения». Brain Research . 1511 : 73–92. doi : 10.1016/ j.brainres.2012.11.001 . hdl : 1721.1/92890. PMC 4099056. PMID  23142759. 
  22. ^ Trantham-Davidson H, Neely LC, Lavin A, Seamans JK (2004). «Механизмы, лежащие в основе дифференциальной регуляции торможения рецепторов дофамина D1 и D2 в префронтальной коре». Журнал нейронауки . 24 (47): 10652–10659. doi :10.1523/jneurosci.3179-04.2004. PMC 5509068. PMID  15564581 . 
  23. ^ You ZB, Chen YQ, Wise RA (2001). «Выделение дофамина и глутамата в прилежащем ядре и вентральной области покрышки крысы после латеральной гипоталамической самостимуляции». Neuroscience . 107 (4): 629–639. doi :10.1016/s0306-4522(01)00379-7. PMID  11720786. S2CID  33615497.
  24. ^ ab Castro, DC; Cole, SL; Berridge, KC (2015). «Роли латерального гипоталамуса, прилежащего ядра и вентрального бледного шара в еде и голоде: взаимодействие между гомеостатическими и вознагражденными цепями». Frontiers in Systems Neuroscience . 9 : 90. doi : 10.3389/fnsys.2015.00090 . PMC 4466441. PMID  26124708 . 
  25. ^ Carlezon WA, Jr; Thomas, MJ (2009). «Биологические субстраты вознаграждения и отвращения: гипотеза активности прилежащего ядра». Neuropharmacology . 56 (Suppl 1): 122–32. doi :10.1016/j.neuropharm.2008.06.075. PMC 2635333 . PMID  18675281. 
  26. ^ Wise RA, Rompre PP (1989). «Мозговой дофамин и вознаграждение». Annual Review of Psychology . 40 : 191–225. doi :10.1146/annurev.ps.40.020189.001203. PMID  2648975.
  27. ^ Wise RA (октябрь 2002 г.). «Схема вознаграждения мозга: понимание неосознаваемых стимулов». Neuron . 36 (2): 229–240. doi : 10.1016/S0896-6273(02)00965-0 . PMID  12383779. S2CID  16547037.
  28. ^ ab Kokane, SS, & Perrotti, LI (2020). Различия между полами и роль эстрадиола в мезолимбических цепях вознаграждения и уязвимость к кокаиновой и опиатной зависимости. Frontiers in Behavioral Neuroscience, 14.
  29. ^ Беккер, Дж. Б. и Чартофф, Э. (2019). Половые различия в нейронных механизмах, опосредующих вознаграждение и зависимость. Нейропсихофармакология, 44(1), 166-183.
  30. ^ Stoof, JC, & Kebabian, JW (1984). Два дофаминовых рецептора: биохимия, физиология и фармакология. Науки о жизни, 35(23), 2281-2296.
  31. ^ Yin, HH, Knowlton, BJ, & Balleine, BW (2005). Блокада рецепторов NMDA в дорсомедиальном полосатом теле предотвращает обучение действию-результату при инструментальном обусловливании. European Journal of Neuroscience, 22(2), 505-512.
  32. ^ abc Koob, GF, & Volkow, ND (2016). Нейробиология зависимости: анализ нейроцепей. The Lancet Psychiatry, 3(8), 760-773.
  33. ^ Кутлу, МГ и Гулд, ТДЖ (2016). Влияние наркотиков на пластичность гиппокампа и зависящее от гиппокампа обучение и память: вклад в развитие и поддержание зависимости. Обучение и память, 23(10), 515-533.
  34. ^ Макго, Дж. Л. (июль 2004 г.). «Миндалевидное тело модулирует консолидацию воспоминаний об эмоционально возбуждающих переживаниях». Annual Review of Neuroscience. 27 (1): 1–28.
  35. ^ Koob GF, Le Moal M. (2008). Зависимость и система антивознаграждения мозга. Annu. Rev. Psychol. 59 29–53. 10.1146/annurev.psych.59.103006.093548 [PubMed] [CrossRef] [Google Scholar] Koob GF, Sanna PP, Bloom FE (1998). Нейробиология зависимости. Neuron 21 467–476.
  36. ^ abc Castro, DC; Berridge, KC (24 октября 2017 г.). «Опиоидные и орексиновые гедонистические горячие точки в орбитофронтальной коре и островке крыс». Труды Национальной академии наук Соединенных Штатов Америки . 114 (43): E9125–E9134. Bibcode: 2017PNAS..114E9125C. doi: 10.1073/pnas.1705753114. PMC 5664503. PMID 29073109. Здесь мы показываем , что опиоидные или орексиновые  стимуляции в орбитофронтальной коре и островке причинно усиливают гедонистические реакции «симпатии» к сладкому и находим третий кортикальный участок, где те же нейрохимические стимуляции снижают положительное гедонистическое воздействие. 
  37. ^ Kringelbach ML, Berridge KC (2012). "The Joyful Mind" (PDF) . Scientific American . 307 (2): 44–45. Bibcode :2012SciAm.307b..40K. doi :10.1038/scientificamerican0812-40. PMID  22844850. Архивировано из оригинала (PDF) 29 марта 2017 г. . Получено 17 января 2017 г. . Поэтому вполне логично, что настоящие центры удовольствия в мозге — те, которые напрямую отвечают за генерацию приятных ощущений — оказываются в некоторых структурах, ранее идентифицированных как часть цепи вознаграждения. Одна из этих так называемых гедонистических горячих точек лежит в подобласти прилежащего ядра, называемой медиальной оболочкой. Вторая находится в вентральном паллидуме, глубоко расположенной структуре около основания переднего мозга, которая получает большую часть своих сигналов от прилежащего ядра. ...      С другой стороны, интенсивную эйфорию труднее получить, чем повседневные удовольствия. Причина может быть в том, что сильное усиление удовольствия — как химически вызванный всплеск удовольствия, который мы вызывали у лабораторных животных — по-видимому, требует активации всей сети сразу. Отказ любого отдельного компонента ослабляет кайф.      Работает ли контур удовольствия — и в частности вентральный паллидум — таким же образом у людей, неясно.

  38. ^ ab Berridge KC (апрель 2012 г.). «От ошибки прогнозирования к заметности стимула: мезолимбическое вычисление мотивации вознаграждения». Eur. J. Neurosci . 35 (7): 1124–1143. doi :10.1111/j.1460-9568.2012.07990.x. PMC 3325516 . PMID  22487042. Здесь я обсуждаю, как мезокортиколимбические механизмы генерируют мотивационный компонент заметности стимула. Значительность стимула принимает павловское обучение и память в качестве одного из входных данных, а в качестве не менее важного входного данных берет нейробиологические факторы состояния (например, состояния наркотических веществ, состояния аппетита, состояния сытости), которые могут меняться независимо от обучения. Изменения нейробиологического состояния могут вызывать невыученные колебания или даже инверсии в способности ранее выученного сигнала вознаграждения вызывать мотивацию. Такие колебания в мотивации, вызванной сигналом, могут значительно отличаться от всех ранее усвоенных значений о соответствующем результате вознаграждения. ... Ассоциативное обучение и прогнозирование являются важными факторами мотивации вознаграждения. Обучение придает стимулирующую ценность произвольным сигналам, таким как павловский условный стимул (CS), который связан с вознаграждением (безусловным стимулом или UCS). Усвоенные сигналы вознаграждения часто являются мощными триггерами желаний. Например, усвоенные сигналы могут вызывать нормальный аппетит у каждого человека, а иногда могут вызывать компульсивные побуждения и рецидив у наркоманов. «Желание» UCS, вызванное сигналом Кратковременное столкновение с CS (или краткое столкновение с UCS) часто запускает импульс повышенной мотивации для получения и потребления большего количества вознаграждения UCS. Это характерная черта заметности стимула. Сигнал как привлекательные мотивационные магниты Когда павловскому CS+ приписывается заметность стимула, он не только вызывает «желание» его UCS, но часто сам сигнал становится очень привлекательным — даже в иррациональной степени. Это притяжение к сигналу является еще одной характерной чертой заметности стимула... Часто можно увидеть две узнаваемые черты заметности стимула, которые можно использовать в экспериментах по нейронауке: (i) «желание», направленное на UCS — вызванные CS импульсы усиленного «желания» получить награду UCS; и (ii) «желание», направленное на CS — мотивированное влечение к павловскому сигналу, которое превращает произвольный стимул CS в мотивационный магнит. 



  39. ^ Malenka RC, Nestler EJ, Hyman SE (2009). Sydor A, Brown RY (ред.). Молекулярная нейрофармакология: основа клинической нейронауки (2-е изд.). Нью-Йорк: McGraw-Hill Medical. стр. 147–148, 367, 376. ISBN 978-0-07-148127-4. Нейроны VTA DA играют важную роль в мотивации, поведении, связанном с вознаграждением (глава 15), внимании и множественных формах памяти. Такая организация системы DA, широкая проекция из ограниченного числа клеточных тел, позволяет координировать ответы на новые мощные вознаграждения. Таким образом, действуя в различных терминальных полях, дофамин придает мотивационную значимость («желание») самому вознаграждению или связанным с ним сигналам (область оболочки прилежащего ядра), обновляет значение, придаваемое различным целям в свете этого нового опыта (орбитальная префронтальная кора), помогает консолидировать множественные формы памяти (миндалевидное тело и гиппокамп) и кодирует новые двигательные программы, которые будут способствовать получению этого вознаграждения в будущем (область ядра прилежащего ядра и дорсальный полосатый участок). В этом примере дофамин модулирует обработку сенсомоторной информации в различных нейронных цепях, чтобы максимизировать способность организма получать будущие вознаграждения. ...
    Схема вознаграждения мозга, на которую воздействуют вызывающие зависимость препараты, обычно опосредует удовольствие и укрепление поведения, связанного с естественными подкреплениями, такими как еда, вода и сексуальный контакт. Дофаминовые нейроны в VTA активируются пищей и водой, а высвобождение дофамина в NAc стимулируется наличием естественных подкреплений, таких как еда, вода или сексуальный партнер. ...
    NAc и VTA являются центральными компонентами схемы, лежащей в основе вознаграждения и памяти о вознаграждении. Как упоминалось ранее, активность дофаминергических нейронов в VTA, по-видимому, связана с прогнозированием вознаграждения. NAc участвует в обучении, связанном с подкреплением и модуляцией двигательных реакций на стимулы, которые удовлетворяют внутренние гомеостатические потребности. Оболочка NAc, по-видимому, особенно важна для начальных действий препарата в схеме вознаграждения; вызывающие зависимость препараты, по-видимому, оказывают большее влияние на высвобождение дофамина в оболочке, чем в ядре NAc.
  40. ^ Berridge KC, Kringelbach ML (1 июня 2013 г.). "Нейробиология аффекта: мозговые механизмы удовольствия и неудовольствия". Current Opinion in Neurobiology . 23 (3): 294–303. doi :10.1016/j.conb.2013.01.017. PMC 3644539 . PMID  23375169. Например, мезолимбический дофамин, вероятно, самый популярный кандидат на нейромедиатор мозга для удовольствия два десятилетия назад, оказывается, вообще не вызывает удовольствия или симпатии. Скорее дофамин более избирательно опосредует мотивационный процесс стимульной заметности, который является механизмом для желания вознаграждений, но не для симпатии к ним .... Скорее опиоидная стимуляция имеет особую способность усиливать симпатию, только если стимуляция происходит в анатомической горячей точке 
  41. ^ Калипари, Эрин С.; Багот, Розмари К.; Пурушотаман, Иммануэль; Дэвидсон, Томас Дж.; Йоргасон, Джордан Т.; Пенья, Кэтрин Дж.; Уокер, Дина М.; Пирпиниас, Стивен Т.; Гиз, Кевин Г.; Рамакришнан, Чару; Дейссерот, Карл; Нестлер, Эрик Дж. (8 марта 2016 г.). «Визуализация in vivo определяет временную сигнатуру средних шипиковых нейронов D1 и D2 при вознаграждении за кокаин». Труды Национальной академии наук . 113 (10): 2726–2731. Bibcode : 2016PNAS..113.2726C. doi : 10.1073/pnas.1521238113 . PMC 4791010 . PMID  26831103. 
  42. ^ Балики, МН; Мансур, А.; Бария, А.Т.; Хуан, Л.; Бергер, С.Э.; Филдс, Х.Л.; Апкариан, А.В. (9 октября 2013 г.). «Разделение прилежащего ядра человека на предполагаемое ядро ​​и оболочку диссоциирует кодирование значений вознаграждения и боли». Журнал нейронауки . 33 (41): 16383–16393. doi :10.1523/JNEUROSCI.1731-13.2013. PMC 3792469. PMID  24107968 . 
  43. ^ Соарес-Кунья, Карина; Коимбра, Барбара; Соуза, Нуно; Родригес, Ана Дж. (сентябрь 2016 г.). «Переоценка стриатальных D1- и D2-нейронов при вознаграждении и отвращении». Neuroscience & Biobehavioral Reviews . 68 : 370–386. doi : 10.1016/j.neubiorev.2016.05.021. hdl : 1822/47044 . PMID  27235078. S2CID  207092810.
  44. ^ Бэмфорд, Найджел С.; Уайтман, Р. Марк; Сульцер, Дэвид (февраль 2018 г.). «Влияние дофамина на кортикостриатные синапсы во время поведения, основанного на вознаграждении». Neuron . 97 (3): 494–510. doi :10.1016/j.neuron.2018.01.006. PMC 5808590 . PMID  29420932. 
  45. ^ Соарес-Кунья, Карина; Коимбра, Барбара; Давид-Перейра, Ана; Борхес, Соня; Пинто, Луиза; Коста, Патрисио; Соуза, Нуно; Родригес, Ана Дж. (сентябрь 2016 г.). «Активация нейронов, экспрессирующих дофаминовые рецепторы D2, в прилежащем ядре повышает мотивацию». Nature Communications . 7 (1): 11829. Bibcode :2016NatCo...711829S. doi :10.1038/ncomms11829. PMC 4931006 . PMID  27337658. 
  46. ^ Соарес-Кунья, Карина; Коимбра, Барбара; Домингес, Ана Вероника; Васконселос, Нивалдо; Соуза, Нуно; Родригеш, Ана Жуан (март 2018 г.). «Микросхема прилежащего ядра, лежащая в основе увеличения мотивации, вызванного D2-MSN». эНейро . 5 (2): ЭНЕВРО.0386–18.2018. doi :10.1523/ENEURO.0386-18.2018. ПМЦ 5957524 . ПМИД  29780881. 
  47. ^ Koob GF, Le Moal M. (2008). Зависимость и система антивознаграждения мозга. Annu. Rev. Psychol. 59 29–53. 10.1146/annurev.psych.59.103006.093548 [PubMed] [CrossRef] [Google Scholar] Koob GF, Sanna PP, Bloom FE (1998). Нейробиология зависимости. Neuron 21 467–476
  48. ^ Мейер, Дж. С. и Квенцер, Л. Ф. (2013). Психофармакология: Лекарства, мозг и поведение. Sinauer Associates.
  49. ^ ab Yin, HH; Ostlund, SB; Balleine, BW (октябрь 2008 г.). «Управляемое вознаграждением обучение за пределами дофамина в прилежащем ядре: интегративные функции сетей кортико-базальных ганглиев». Европейский журнал нейронауки . 28 (8): 1437–48. doi :10.1111/j.1460-9568.2008.06422.x. PMC 2756656. PMID  18793321 . 
  50. ^ Даян, П.; Берридж, К.С. (июнь 2014 г.). «Павловское обучение на основе вознаграждения на основе моделей и без них: переоценка, пересмотр и раскрытие». Cognitive, Affective, & Behavioral Neuroscience . 14 (2): 473–92. doi :10.3758/s13415-014-0277-8. PMC 4074442 . PMID  24647659. 
  51. ^ Balleine, BW; Morris, RW; Leung, BK (2 декабря 2015 г.). «Таламокортикальная интеграция инструментального обучения и производительности и их распад при зависимости». Brain Research . 1628 (Pt A): 104–16. doi :10.1016/j.brainres.2014.12.023. PMID  25514336. S2CID  11776683. Важно, что мы обнаружили доказательства повышенной активности в прямом пути; как внутриклеточные изменения в экспрессии маркера пластичности pERK, так и соотношения AMPA/NMDA, вызванные стимуляцией корковых афферентов, были увеличены в нейронах прямого пути D1. Напротив, нейроны D2 показали противоположное изменение пластичности; Стимуляция корковых афферентов снижала соотношение AMPA/NMDA в этих нейронах (Шан и др., 2014).
  52. ^ Nakanishi, S; Hikida, T; Yawata, S (12 декабря 2014 г.). «Различные дофаминергические регуляции прямых и косвенных путей в поведении обучения, основанном на вознаграждении и избегании». Neuroscience . 282 : 49–59. doi :10.1016/j.neuroscience.2014.04.026. PMID  24769227. S2CID  21652525.
  53. ^ Шифлетт, М. В.; Баллейн, Б. В. (15 сентября 2011 г.). «Молекулярные субстраты контроля действий в кортико-стриарных цепях». Progress in Neurobiology . 95 (1): 1–13. doi :10.1016/j.pneurobio.2011.05.007. PMC 3175490 . PMID  21704115. 
  54. ^ Шульц, В. (апрель 2013 г.). «Обновление сигналов вознаграждения дофамина». Current Opinion in Neurobiology . 23 (2): 229–38. doi :10.1016/j.conb.2012.11.012. PMC 3866681. PMID  23267662 . 
  55. ^ Шифлетт, М. В.; Баллейн, Б. В. (17 марта 2011 г.). «Вклад сигнализации ERK в полосатом теле в инструментальное обучение и производительность». Behavioural Brain Research . 218 (1): 240–7. doi :10.1016/j.bbr.2010.12.010. PMC 3022085. PMID  21147168 . 
  56. ^ ab Nestler EJ (декабрь 2013 г.). «Клеточная основа памяти для зависимости». Dialogues Clin. Neurosci . 15 (4): 431–443. PMC 3898681 . PMID  24459410. 
  57. ^ ab Ruffle JK (ноябрь 2014 г.). «Молекулярная нейробиология зависимости: что такое (Δ)FosB?». Am. J. Drug Alcohol Abuse . 40 (6): 428–437. doi :10.3109/00952990.2014.933840. PMID  25083822. S2CID  19157711. Сильная корреляция между хроническим воздействием наркотиков и ΔFosB открывает новые возможности для таргетной терапии при зависимости (118) и предлагает методы анализа их эффективности (119). За последние два десятилетия исследования перешли от выявления индукции ΔFosB к изучению его последующего действия (38). Вероятно, что исследования ΔFosB теперь перейдут в новую эру — использование ΔFosB в качестве биомаркера. ... Выводы ΔFosB является важным фактором транскрипции, вовлеченным в молекулярные и поведенческие пути зависимости после многократного воздействия наркотиков. Образование ΔFosB в нескольких областях мозга и молекулярный путь, ведущий к образованию комплексов AP-1, хорошо изучены. Установление функциональной цели ΔFosB позволило дополнительно определить некоторые ключевые аспекты его молекулярных каскадов, включающих такие эффекторы, как GluR2 (87,88), Cdk5 (93) и NFkB (100). Более того, многие из этих идентифицированных молекулярных изменений теперь напрямую связаны со структурными, физиологическими и поведенческими изменениями, наблюдаемыми после хронического воздействия наркотиков (60,95,97,102). Новые рубежи исследований, изучающих молекулярные роли ΔFosB, были открыты эпигенетическими исследованиями, и недавние достижения проиллюстрировали роль ΔFosB, действующего на ДНК и гистоны, действительно как молекулярный переключатель (34). В результате нашего улучшенного понимания ΔFosB в зависимости, стало возможным оценить аддиктивный потенциал современных лекарств (119), а также использовать его в качестве биомаркера для оценки эффективности терапевтических вмешательств (121,122,124). Некоторые из этих предлагаемых вмешательств имеют ограничения (125) или находятся в зачаточном состоянии (75). Однако есть надежда, что некоторые из этих предварительных результатов могут привести к инновационным методам лечения, которые крайне необходимы при зависимости.


  58. ^ ab Olsen CM (декабрь 2011 г.). «Естественные вознаграждения, нейропластичность и ненаркотическая зависимость». Neuropharmacology . 61 (7): 1109–1122. doi :10.1016/j.neuropharm.2011.03.010. PMC 3139704 . PMID  21459101. Исследования функциональной нейровизуализации на людях показали, что азартные игры (Breiter et al, 2001), шопинг (Knutson et al, 2007), оргазм ( Komisaruk et al, 2004), видеоигры (Koepp et al, 1998; Hoeft et al, 2008) и вид аппетитной еды (Wang et al, 2004a) активируют многие из тех же областей мозга (т. е. мезокортиколимбическую систему и расширенную миндалевидную железу), что и наркотики, вызывающие злоупотребление (Volkow et al, 2004). ... Перекрестная сенсибилизация также двунаправлена, поскольку история приема амфетамина облегчает сексуальное поведение и усиливает связанное с этим увеличение NAc DA ... Как и в случае с пищевым вознаграждением, сексуальный опыт также может приводить к активации каскадов сигналов, связанных с пластичностью. Фактор транскрипции дельта FosB увеличивается в NAc, PFC, дорсальном полосатом теле и VTA после повторяющегося сексуального поведения (Wallace et al., 2008; Pitchers et al., 2010b). Это естественное увеличение дельта FosB или вирусная сверхэкспрессия дельта FosB в NAc модулирует сексуальную активность, а блокада дельта FosB NAc ослабляет это поведение (Hedges et al, 2009; Pitchers et al., 2010b). Кроме того, вирусная сверхэкспрессия дельта FosB усиливает обусловленное предпочтение места для среды, сопряженной с сексуальным опытом (Hedges et al., 2009). ... У некоторых людей наблюдается переход от «нормального» к компульсивному вовлечению в естественные вознаграждения (такие как еда или секс), состояние, которое некоторые называют поведенческой или ненаркотической зависимостью (Holden, 2001; Grant et al., 2006a). ... У людей роль дофаминовой сигнализации в процессах сенсибилизации стимулов недавно была подчеркнута наблюдением синдрома дисрегуляции дофамина у некоторых пациентов, принимающих дофаминергические препараты. Этот синдром характеризуется вызванным лекарствами увеличением (или компульсивным) вовлечения в ненаркотические вознаграждения, такие как азартные игры, шопинг или секс (Evans et al, 2006; Aiken, 2007; Lader, 2008)». 
    Таблица 1: Сводка пластичности, наблюдаемой после воздействия лекарственных препаратов или естественных подкрепителей.
  59. ^ ab Biliński P, Wojtyła A, Kapka-Skrzypczak L, Chwedorowicz R, Cyranka M, Studziński T (2012). "Эпигенетическая регуляция при наркотической зависимости". Ann. Agric. Environ. Med . 19 (3): 491–496. PMID  23020045. По этим причинам ΔFosB считается первичным и причинным фактором транскрипции в создании новых нейронных связей в центре вознаграждения, префронтальной коре и других регионах лимбической системы. Это отражается в повышенном, стабильном и длительном уровне чувствительности к кокаину и другим наркотикам, а также в тенденции к рецидиву даже после длительных периодов воздержания. Эти вновь созданные сети функционируют очень эффективно через новые пути, как только наркотики, вызывающие злоупотребление, принимаются дальше... Таким образом, индукция экспрессии гена CDK5 происходит вместе с подавлением гена G9A, кодирующего диметилтрансферазу, действующую на гистон H3. Механизм обратной связи можно наблюдать в регуляции этих 2 важнейших факторов, которые определяют адаптивный эпигенетический ответ на кокаин. Это зависит от ΔFosB, ингибирующего экспрессию гена G9a, т.е. синтез H3K9me2, который, в свою очередь, ингибирует факторы транскрипции для ΔFosB. По этой причине наблюдаемая гиперэкспрессия G9a, которая обеспечивает высокие уровни диметилированной формы гистона H3, устраняет структурные и пластичные эффекты нейронов, вызванные кокаином, посредством этой обратной связи, которая блокирует транскрипцию ΔFosB
  60. ^ Pitchers KK, Vialou V, Nestler EJ, Laviolette SR, Lehman MN, Coolen LM (февраль 2013 г.). «Естественные и лекарственные вознаграждения действуют на общие механизмы нейронной пластичности с ΔFosB в качестве ключевого медиатора». The Journal of Neuroscience . 33 (8): 3434–3442. doi :10.1523/JNEUROSCI.4881-12.2013. PMC 3865508 . PMID  23426671. Наркотики, вызывающие злоупотребление, вызывают нейропластичность в естественном пути вознаграждения, в частности в прилежащем ядре (NAc), тем самым вызывая развитие и проявление аддиктивного поведения. ... В совокупности эти результаты показывают, что злоупотребление наркотиками и естественное поощрительное поведение действуют на общие молекулярные и клеточные механизмы пластичности, которые контролируют уязвимость к наркотической зависимости, и что эта повышенная уязвимость опосредована ΔFosB и его нижестоящими транскрипционными мишенями. ... Сексуальное поведение является высокопоощряющим (Tenk et al., 2009), а сексуальный опыт вызывает сенсибилизированное поведение, связанное с наркотиками, включая перекрестную сенсибилизацию к локомоторной активности, вызванной амфетамином (Amph) (Bradley and Meisel, 2001; Pitchers et al., 2010a) и усиленное поощрение Amph (Pitchers et al., 2010a). Более того, сексуальный опыт вызывает нейронную пластичность в NAc, аналогичную той, которая вызвана воздействием психостимуляторов, включая повышенную плотность дендритных шипиков (Meisel and Mullins, 2006; Pitchers et al., 2010a), измененный трафик рецепторов глутамата и сниженную силу синапсов в реагирующих на префронтальную кору нейронах оболочки NAc (Pitchers et al., 2012). Наконец, было обнаружено, что периоды воздержания от сексуального опыта имеют решающее значение для усиления вознаграждения Amph, спиногенеза NAc (Pitchers et al., 2010a) и трафика рецепторов глутамата (Pitchers et al., 2012). Эти результаты свидетельствуют о том, что естественный и наркотический опыт вознаграждения имеют общие механизмы нейронной пластичности 
  61. ^ Белоат Л. Н., Вимс П. В., Кейси ГР, Уэбб И. К., Кулен Л. М. (февраль 2016 г.). «Активация рецептора NMDA прилежащего ядра регулирует перекрестную сенсибилизацию к амфетамину и экспрессию deltaFosB после сексуального опыта у самцов крыс». Нейрофармакология . 101 : 154–164. doi : 10.1016/j.neuropharm.2015.09.023. PMID  26391065. S2CID  25317397.
  62. ^ Robison AJ, Nestler EJ (ноябрь 2011 г.). «Транскрипционные и эпигенетические механизмы зависимости». Nat. Rev. Neurosci . 12 (11): 623–637. doi :10.1038/nrn3111. PMC 3272277 . PMID  21989194. ΔFosB служит одним из главных контрольных белков, управляющих этой структурной пластичностью. ... ΔFosB также подавляет экспрессию G9a, что приводит к снижению репрессивного метилирования гистонов в гене cdk5. Конечным результатом является активация гена и повышенная экспрессия CDK5. ... Напротив, ΔFosB связывается с геном c-fos и привлекает несколько корепрессоров, включая HDAC1 (гистондеацетилаза 1) и SIRT 1 (сиртуин 1). ... Конечным результатом является подавление гена c-fos . 
    Рисунок 4: Эпигенетическая основа лекарственной регуляции экспрессии генов
  63. ^ Hitchcock LN, Lattal KM (2014). "Гистон-опосредованная эпигенетика в зависимости". Эпигенетика и нейропластичность — доказательства и дебаты . Прогресс в молекулярной биологии и трансляционной науке. Том 128. стр. 51–87. doi :10.1016/B978-0-12-800977-2.00003-6. ISBN 9780128009772. PMC  5914502 . PMID  25410541. {{cite book}}: |journal=проигнорировано ( помощь )
  64. ^ Walker DM, Nestler EJ (2018). «Нейроэпигенетика и зависимость». Нейрогенетика, часть II . Справочник по клинической неврологии. Том 148. стр. 747–765. doi :10.1016/B978-0-444-64076-5.00048-X. ISBN 9780444640765. PMC  5868351 . PMID  29478612.
  65. ^ Rang HP (2003). Фармакология . Эдинбург: Churchill Livingstone. стр. 596. ISBN 978-0-443-07145-4.
  66. ^ ab Рой А. Уайз, Активация путей вознаграждения мозга под действием наркотиков, Наркотическая и алкогольная зависимость 1998; 51 13–22.
  67. ^ Goeders NE, Smith JE (1983). «Кортикальное дофаминергическое участие в подкреплении кокаином». Science . 221 (4612): 773–775. Bibcode :1983Sci...221..773G. doi :10.1126/science.6879176. PMID  6879176.
  68. ^ Goeders NE, Smith JE (1993). «Внутричерепное введение кокаина в медиальную префронтальную кору увеличивает оборот дофамина в прилежащем ядре». J. Pharmacol. Exp. Ther . 265 (2): 592–600. PMID  8496810.
  69. ^ Кларк, Хоммер Д.В.; Перт А.; Скирболл Л.Р. (1985). «Электрофизиологическое действие никотина на отдельные единицы черной субстанции». Br. J. Pharmacol . 85 (4): 827–835. doi :10.1111/j.1476-5381.1985.tb11081.x. PMC 1916681. PMID  4041681 . 
  70. ^ Westfall, Thomas C.; Grant, Heather; Perry, Holly (январь 1983). «Высвобождение дофамина и 5-гидрокситриптамина из полосатых срезов крысы после активации никотиновых холинергических рецепторов». Общая фармакология: сосудистая система . 14 (3): 321–325. doi :10.1016/0306-3623(83)90037-x. PMID  6135645.
  71. ^ Рёмер Томсен, К.; Уайброу, П. К.; Крингельбах, М. Л. (2015). «Переосмысление ангедонии: новые перспективы балансировки сетей удовольствия в человеческом мозге». Frontiers in Behavioral Neuroscience . 9 : 49. doi : 10.3389/fnbeh.2015.00049 . PMC 4356228. PMID  25814941 . 
  72. ^ Томсен, КР (2015). «Измерение ангедонии: нарушенная способность добиваться, испытывать и узнавать о вознаграждении». Frontiers in Psychology . 6 : 1409. doi : 10.3389 /fpsyg.2015.01409 . PMC 4585007. PMID  26441781. 
  73. ^ Олни, Дж. Дж.; Уорлоу, СМ.; Наффцигер, Э. Э.; Берридж, К. К. (август 2018 г.). «Современные перспективы значимости стимулов и их применение в клинических расстройствах». Current Opinion in Behavioral Sciences . 22 : 59–69. doi : 10.1016/j.cobeha.2018.01.007. PMC 5831552. PMID 29503841  . 
  74. ^ Preda, Adrian (2014). «Визуализация мозга коррелирует с ангедонией». В Ritsner, Michael (ред.). Anhedonia: a complete guide . Dordrecht: Springer Netherlands. ISBN 978-94-017-8590-7.
  75. ^ Чжан, Б.; Линь, П.; Ши, Х.; Онгюр, Д.; Ауэрбах, РП.; Ван, Х.; Яо, С.; Ван, Х. (сентябрь 2016 г.). «Картирование специфической для ангедонии дисфункции в трансдиагностическом подходе: метаанализ ALE». Brain Imaging and Behavior . 10 (3): 920–39. doi :10.1007/s11682-015-9457-6. PMC 4838562. PMID  26487590 . 
  76. ^ Тредуэй, Майкл, Т. (2016). «Нейробиология мотивационных дефицитов при депрессии — обновление возможных патомеханизмов». В Симпсон, Элинор Х.; Балсам, Питер Д. (ред.). Поведенческая нейронаука мотивации (текущие темы поведенческой нейронауки) (1-е изд.). Швейцария: Springer International Publishing. стр. 343. ISBN 978-3-319-26933-7. В сравнительно недавней литературе исследования мотивации и подкрепления при депрессии в значительной степени последовательны в обнаружении различий по сравнению со здоровыми контрольными лицами (Whitton et al. 2015). В нескольких исследованиях с использованием задачи затрат усилий на вознаграждение (EEfRT) пациенты с БДР тратили меньше усилий на вознаграждение по сравнению с контрольными лицами (Treadway et al. 2012; Yang et al. 2014){{cite book}}: CS1 maint: несколько имен: список авторов ( ссылка )
  77. ^ Саламоне, Дж. Д.; Йон, С. Э.; Лопес-Крус, Л.; Сан-Мигель, Н.; Корреа, М. (май 2016 г.). «Активационные и связанные с усилием аспекты мотивации: нейронные механизмы и последствия для психопатологии». Мозг: Журнал неврологии . 139 (ч. 5): 1325–47. doi : 10.1093/brain/aww050. PMC 5839596. PMID  27189581 . 
  78. ^ Russo, SJ; Nestler, EJ (сентябрь 2013 г.). «Контур вознаграждения мозга при расстройствах настроения». Nature Reviews. Neuroscience . 14 (9): 609–25. doi : 10.1038/nrn3381. PMC 3867253. PMID  23942470. 
  79. ^ Treadway, MT; Zald, DH (январь 2011). «Переосмысление ангедонии при депрессии: уроки трансляционной нейронауки». Neuroscience and Biobehavioral Reviews . 35 (3): 537–55. doi :10.1016/j.neubiorev.2010.06.006. PMC 3005986. PMID  20603146 . 
  80. ^ Уолш, Дж. Дж.; Хан, М. Х. (12 декабря 2014 г.). «Гетерогенность нейронов вентральной области покрышки: проекционные функции в контексте, связанном с настроением». Neuroscience . 282 : 101–8. doi :10.1016/j.neuroscience.2014.06.006. PMC 4339667 . PMID  24931766. 
  81. ^ Ламмель, С.; Лим, Б.К.; Маленка, Р.К. (январь 2014 г.). «Награда и отвращение в гетерогенной системе дофамина среднего мозга». Нейрофармакология . 76 Pt B: 351–9. doi :10.1016/j.neuropharm.2013.03.019. PMC 3778102. PMID  23578393 . 
  82. ^ Ноулэнд, Д.; Лим, Б.К. (5 января 2018 г.). «Основанные на контурах структуры депрессивного поведения: роль контуров вознаграждения и не только». Фармакология, биохимия и поведение . 174 : 42–52. doi : 10.1016/j.pbb.2017.12.010. PMC 6340396. PMID  29309799 . 
  83. ^ ab Lammel, S; Tye, KM; Warden, MR (январь 2014 г.). «Прогресс в понимании расстройств настроения: оптогенетическое препарирование нейронных цепей». Genes, Brain and Behavior . 13 (1): 38–51. doi : 10.1111/gbb.12049 . PMID  23682971. S2CID  18542868.
  84. ^ Bucci, P; Galderisi, S (май 2017). «Категоризация и оценка негативных симптомов». Current Opinion in Psychiatry . 30 (3): 201–208. doi :10.1097/YCO.00000000000000322. PMID  28212174. S2CID  9923114. Они также дают отдельную оценку консумматорной ангедонии (сниженное ощущение удовольствия, получаемого от продолжающихся приятных занятий) и предвосхищающей ангедонии (сниженная способность предвидеть будущее удовольствие). Фактически, первая из них, по-видимому, относительно нетронута при шизофрении, тогда как вторая, по-видимому, нарушена [32 – 34]. Однако также сообщалось о противоречивых данных [35].
  85. ^ Young, Anticevic & Barch 2018, стр. 215a, «Несколько недавних обзоров (например, Cohen and Minor, 2010) обнаружили, что люди с шизофренией демонстрируют относительно сохранные самооценки эмоциональных реакций на стимулы, вызывающие аффект, а также другие показатели сохранности реакции... Более неоднозначная картина возникает из функциональных нейровизуализационных исследований, изучающих реакции мозга на другие типы приятных стимулов при шизофрении (Paradiso et al., 2003)»
  86. ^ Young, Anticevic & Barch 2018, стр. 215b, «Поэтому удивительно, что поведенческие исследования предположили, что обучение с подкреплением остается нетронутым при шизофрении, когда обучение относительно неявное (хотя см. Siegert et al., 2008 для доказательств нарушения обучения задачам последовательного времени реакции), но более нарушенным, когда необходимы явные представления обстоятельств стимул-вознаграждение (см. Gold et al., 2008). Эта модель привела к теории о том, что опосредованная полосатым телом система постепенного обучения с подкреплением может быть нетронутой при шизофрении, в то время как более быстрые, онлайновые, опосредованные корой системы обучения нарушены».
  87. ^ Young, Anticevic & Barch 2018, стр. 216, «Недавно мы показали, что люди с шизофренией могут демонстрировать улучшенные показатели когнитивного контроля, когда информация о вознаграждениях представлена ​​извне, но не когда она должна поддерживаться внутри (Mann et al., 2013), при этом некоторые доказательства нарушений в DLPFC и активации полосатого тела во время внутреннего поддержания информации о вознаграждении связаны с различиями в мотивации людей (Chung and Barch, 2016)».
  88. ^ Литтман, доктор философии, Эллен (февраль 2017 г.). «Никогда не достаточно? Почему мозг при СДВГ жаждет стимуляции». Журнал ADDditude . New Hope Media LLC . Получено 27 мая 2021 г.
  89. ^ Чандлер DJ, Уотерхаус BD, Гао WJ (май 2014). «Новые перспективы катехоламинергической регуляции исполнительных цепей: доказательства независимой модуляции префронтальных функций дофаминергическими и норадренергическими нейронами среднего мозга». Frontiers in Neural Circuits . 8 : 53. doi : 10.3389/fncir.2014.00053 . PMC 4033238. PMID  24904299. 
  90. ^ Блум, Кеннет; Чен, Аманда Ли-Чуан; Брейверман, Эрик Р.; Комингс, Дэвид Э.; Чен, Томас Дж. Х.; Аркури, Ванесса; Блум, Сет Х.; Даунс, Бернард В.; Уэйт, Роджер Л.; Нотаро, Элисон; Лубар, Джоэл; Уильямс, Лонна; Прихода, Томас Дж.; Паломо, Томас; Оскар-Берман, Марлен (октябрь 2008 г.). «Расстройство дефицита внимания и гиперактивности и синдром дефицита вознаграждения». Нейропсихиатрические заболевания и лечение . 4 (5): 893–918. doi : 10.2147/ndt.s2627 . ISSN  1176-6328. PMC 2626918. PMID 19183781  . 
  91. ^ Wise RA (1996). «Наркотики, вызывающие привыкание, и вознаграждение за стимуляцию мозга». Annu. Rev. Neurosci . 19 : 319–340. doi :10.1146/annurev.ne.19.030196.001535. PMID  8833446.
  92. ^ ab "нервная система человека | Описание, развитие, анатомия и функции". Encyclopedia Britannica . 23 января 2024 г.
  93. ^ ab Джеймс Олдс и Питер Милнер (декабрь 1954 г.). «Положительное подкрепление, вызванное электрической стимуляцией септальной области и других регионов мозга крысы». Журнал сравнительной и физиологической психологии . 47 (6): 419–427. doi :10.1037/h0058775. PMID  13233369. Архивировано из оригинала 5 февраля 2012 г. Получено 26 апреля 2011 г.
  94. ^ Крингельбах, Мортен Л.; Берридж, Кент К. (25 июня 2010 г.). «Функциональная нейроанатомия удовольствия и счастья». Discovery Medicine . 9 (49): 579–587. PMC 3008353. PMID 20587348  – через www.discoverymedicine.com. 
  95. ^ Иван Петрович Павлов; Г. В. Анреп (2003). Условные рефлексы. Корпорация «Курьер». С. 1–. ISBN 978-0-486-43093-5.
  96. ^ Фридлунд, Алан и Джеймс Калат. Разум и мозг, наука психологии. Калифорния: Cengage Learning, 2014. Печать.
  97. ^ Хан В., Теллес Л.А., Перкинс М.Х., Перес И.О., Ку Т., Феррейра Дж.; и др. (2018). «Нейральная цепь для вознаграждения, вызванного кишечником». Клетка . 175 (3): 665–678.e23. дои : 10.1016/j.cell.2018.08.049. ПМК 6195474 . ПМИД  30245012. {{cite journal}}: CS1 maint: несколько имен: список авторов ( ссылка )
  98. ^ ab Berridge, Kent C.; Kringelbach, Morten L. (август 2008 г.). «Аффективная нейронаука удовольствия: вознаграждение у людей и животных». Психофармакология . 199 (3): 457–480. doi :10.1007/s00213-008-1099-6. PMC 3004012. PMID  18311558 . 
  99. ^ аб Феррери Л., Мас-Эрреро Э., Заторре Р.Дж., Риполлес П., Гомес-Андрес А., Аликарт Х., Оливе Г., Марко-Пальярес Дж., Антонихоан Р.М., Валле М., Риба Дж., Родригес-Форнеллс А. (январь 2019 г.). «Дофамин модулирует вознаграждение, вызываемое музыкой». Труды Национальной академии наук Соединенных Штатов Америки . 116 (9): 3793–3798. Бибкод : 2019PNAS..116.3793F. дои : 10.1073/pnas.1811878116 . ПМК 6397525 . PMID  30670642. Прослушивание приятной музыки часто сопровождается измеримыми телесными реакциями, такими как мурашки по коже или дрожь по позвоночнику, обычно называемые «ознобом» или «дрожью»... В целом, наши результаты прямо показали, что фармакологические вмешательства двунаправленно модулируют вознаграждение реакции, вызванные музыкой. В частности, мы обнаружили, что рисперидон ухудшает способность участников испытывать музыкальное удовольствие, тогда как леводопа усиливает его. ... Здесь, напротив, изучая реакции на абстрактные вознаграждения у людей, мы показываем, что манипуляция дофаминергической передачей влияет как на удовольствие (т.е. количество времени, в течение которого сообщается о ознобе и эмоциональном возбуждении, измеренном EDA), так и на мотивационные компоненты музыкального вознаграждения (деньги, которые готовы потратить). Эти результаты показывают, что дофаминергическая сигнализация является непременным условием не только для мотивационных реакций , как это было показано на примере первичных и вторичных вознаграждений, но также и на примере гедонистических реакций на музыку. Этот результат подтверждает недавние открытия, показывающие, что дофамин также опосредует воспринимаемую приятность, достигаемую другими типами абстрактных вознаграждений, и ставит под сомнение предыдущие выводы, полученные в животных моделях относительно первичных вознаграждений, таких как еда. 
  100. ^ ab Goupil L, Aucouturier JJ (февраль 2019 г.). «Музыкальное удовольствие и музыкальные эмоции». Труды Национальной академии наук Соединенных Штатов Америки . 116 (9): 3364–3366. Bibcode : 2019PNAS..116.3364G. doi : 10.1073/pnas.1900369116 . PMC 6397567. PMID  30770455. В фармакологическом исследовании, опубликованном в PNAS, Ferreri et al . (1) представляют доказательства того, что усиление или ингибирование передачи сигналов дофамина с помощью леводопы или рисперидона модулирует удовольствие, испытываемое во время прослушивания музыки. ... В заключительном заходе, чтобы установить не только корреляционную, но и причинную роль дофамина в музыкальном удовольствии, авторы обратились к непосредственному манипулированию дофаминергической сигнализацией в полосатом теле, сначала путем применения возбуждающей и ингибирующей транскраниальной магнитной стимуляции к левой дорсолатеральной префронтальной коре участников, области, которая, как известно, модулирует функцию полосатого тела (5), и, наконец, в текущем исследовании, путем введения фармацевтических агентов, способных изменять синаптическую доступность дофамина (1), оба из которых влияли на воспринимаемое удовольствие, физиологические показатели возбуждения и денежную стоимость, приписываемую музыке в прогнозируемом направлении. ... Хотя вопрос музыкального выражения эмоций имеет долгую историю исследований, в том числе в PNAS (6), и психофизиологическое направление исследований 1990-х годов уже установило, что музыкальное удовольствие может активировать автономную нервную систему (7), демонстрация авторами роли системы вознаграждения в музыкальных эмоциях была воспринята как первое доказательство того, что это были подлинные эмоции, изучение которых имеет полное право информировать нейробиологию о наших повседневных когнитивных, социальных и аффективных функциях (8). Между прочим, это направление работы, кульминацией которого стала статья Феррери и др. (1), вероятно, сделало больше для привлечения финансирования исследований в области музыкальных наук, чем любое другое в этом сообществе. Доказательства Феррери и др. (1) предоставляют новейшую поддержку убедительной нейробиологической модели, в которой музыкальное удовольствие возникает из взаимодействия древних систем вознаграждения/оценки (стриатно-лимбической-паралимбической) с более филогенетически продвинутыми системами восприятия/предсказания (височно-фронтальной). 

Внешние ссылки