Стереопсис (от древнегреческого στερεός ( stereós ) «твердое» и ὄψις ( ópsis ) «вид, зрение») — компонент восприятия глубины , получаемый посредством бинокулярного зрения . [1] Стереопсис не единственный фактор, способствующий восприятию глубины, но он является основным. Бинокулярное зрение возникает потому, что каждый глаз получает разное изображение, поскольку они находятся в немного разных положениях в голове (левый и правый глаз). Эти позиционные различия называются «горизонтальными различиями» или, в более общем смысле, « бинокулярными различиями ». Несоответствия обрабатываются в зрительной коре головного мозга, чтобы обеспечить восприятие глубины . Хотя бинокулярные различия естественным образом присутствуют при просмотре реальной трехмерной сцены двумя глазами, их также можно смоделировать, искусственно представляя два разных изображения отдельно для каждого глаза, используя метод, называемый стереоскопией . Восприятие глубины в таких случаях также называют «стереоскопической глубиной». [1]
Однако восприятие глубины и трехмерной структуры возможно с помощью информации, видимой только одним глазом, такой как различия в размере объекта и параллаксе движения (различия в изображении объекта с течением времени при движении наблюдателя), хотя [2] впечатление глубины в этих случаях часто не такое яркое, как впечатление, получаемое от бинокулярных различий. [3] Таким образом, термин стереопсис (или стереоскопическая глубина) может также относиться конкретно к уникальному впечатлению глубины, связанному с бинокулярным зрением (в просторечии называемым видением «в 3D»).
Было высказано предположение, что впечатление «реального» разделения по глубине связано с точностью, с которой определяется глубина, и что сознательное осознание этой точности, воспринимаемое как впечатление интерактивности и реальности, может помочь в планировании двигательных действий. действие. [4]
Стереопсис имеет два различных аспекта: грубый стереопсис и тонкий стереопсис, которые предоставляют информацию о глубине с разной степенью пространственной и временной точности.
Стереопсис, которого может достичь человек, ограничен уровнем остроты зрения более слабого глаза. В частности, пациентам со сравнительно более низкой остротой зрения, как правило, требуются относительно большие пространственные частоты для присутствия во входных изображениях, иначе они не смогут достичь стереопсиса. [6] Для тонкого стереопсиса требуется, чтобы оба глаза имели хорошую остроту зрения, чтобы обнаруживать небольшие пространственные различия, и его легко нарушить из-за ранней депривации зрения. Имеются указания на то, что в ходе развития зрительной системы у младенцев грубый стереопсис может развиваться раньше тонкого стереопсиса и что грубый стереопсис управляет вергентными движениями, которые необходимы для развития тонкого стереопсиса на последующей стадии. [7] [8] Кроме того, есть признаки того, что грубый стереопсис является механизмом, который удерживает два глаза на одном уровне после операции по поводу косоглазия . [9]
Также было предложено различать два разных типа стереоскопического восприятия глубины: статическое восприятие глубины (или статическое стереовосприятие) и восприятие глубины движения (или восприятие стереодвижения). Некоторые люди, у которых есть косоглазие и которые не демонстрируют восприятия глубины при использовании статических стереотестов (в частности, при использовании тестов Титмуса, см. раздел этой статьи, посвященный контурным стереотестам), действительно воспринимают движение в глубине при тестировании с использованием динамических стереограмм со случайными точками . [10] [11] [12] Одно исследование показало, что сочетание стереопсиса движения и отсутствия статического стереопсиса присутствует только у экзотропов , а не у эзотропов . [13]
Имеются веские основания полагать, что стереоскопический механизм состоит как минимум из двух механизмов восприятия, [14] возможно, из трех. [15] Грубый и точный стереопсис обрабатываются двумя разными физиологическими подсистемами, при этом грубый стереопсис получается из диплопических стимулов (то есть стимулов с различиями, выходящими далеко за пределы бинокулярного слияния) и дает лишь смутное представление о величине глубины. [14] Грубый стереопсис, по-видимому, связан с магно-путем , который обрабатывает низкие различия пространственных частот и движение, а тонкий стереопсис - с парво-путем , который обрабатывает высокие пространственные частотные различия. [16] Грубая стереоскопическая система, по-видимому, способна предоставить остаточную информацию о бинокулярной глубине у некоторых людей, у которых отсутствует точный стереопсис. [17] Было обнаружено, что люди по-разному интегрируют различные стимулы, например стереоскопические сигналы и окклюзию движения. [18]
То, как мозг комбинирует различные сигналы – включая стерео, движение, угол вергенции и монокулярные сигналы – для восприятия движения в глубине и положения трехмерного объекта, является областью активных исследований в области науки о зрении и смежных дисциплинах. [19] [20] [21] [22]
Не все обладают одинаковой способностью видеть с помощью стереопсиса. Одно исследование показывает, что 97,3% людей способны различать глубину при разнице по горизонтали в 2,3 угловых минуты или меньше, и по крайней мере 80% могут различать глубину при разнице по горизонтали в 30 угловых секунд . [23]
Стереопсис положительно влияет на выполнение практических задач, таких как вдевание нитки, ловля мяча (особенно в быстрых играх с мячом [24] ), разливание жидкостей и другие. Профессиональная деятельность может включать в себя работу со стереоскопическими приборами, такими как бинокулярный микроскоп . Хотя для некоторых из этих задач может быть полезна компенсация зрительной системы с помощью других сигналов глубины, есть некоторые роли, для которых стереопсис необходим. Профессии, требующие точного определения расстояния, иногда включают требование продемонстрировать определенный уровень стереопсиса; в частности, такое требование существует к пилотам самолетов (даже если первый пилот, совершивший кругосветное путешествие в одиночку, Уайли Пост , совершил свой подвиг только с монокулярным зрением.) [25] Также хирурги [26] обычно демонстрируют высокую остроту стереоскопического зрения. Что касается вождения автомобиля , исследование выявило положительное влияние стереопсиса в определенных ситуациях только на промежуточных расстояниях; [27] кроме того, исследование пожилых людей показало, что яркий свет , потеря поля зрения и полезное поле зрения были значимыми предикторами попадания в аварию, тогда как значения остроты зрения, контрастной чувствительности и стереоостроты у пожилых людей не были связаны с авариями. . [28]
Помимо стереопсиса, бинокулярное зрение имеет и другие преимущества, в частности, улучшение качества зрения за счет бинокулярного суммирования ; люди с косоглазием (даже те, у кого нет двоения в глазах) имеют более низкие баллы по бинокулярной суммации, и это, по-видимому, побуждает людей с косоглазием закрывать один глаз в ситуациях, требующих визуального восприятия. [29] [30]
Давно признано, что полное бинокулярное зрение, включая стереопсис, является важным фактором стабилизации послеоперационного результата коррекции косоглазия. Многие люди, лишенные стереопсиса, имеют (или имели) видимое косоглазие , которое, как известно, оказывает потенциальное социально-экономическое воздействие на детей и взрослых. В частности, косоглазие как с большим, так и с малым углом может негативно повлиять на самооценку , поскольку мешает нормальному зрительному контакту , часто вызывая смущение, гнев и чувство неловкости. [31] Более подробную информацию об этом см. в разделе « Психосоциальные последствия косоглазия» .
Было отмечено, что с растущим внедрением технологии 3D-дисплея в сфере развлечений, а также в медицинской и научной визуализации, высококачественное бинокулярное зрение, включая стереопсис, может стать ключевым фактором успеха в современном обществе. [32]
Тем не менее, есть признаки того, что недостаток стереозрения может побуждать людей компенсировать его другими способами: в частности, стереослепота может давать людям преимущество при изображении сцены с использованием всех видов монокулярных сигналов глубины, и среди художников, по-видимому, есть непропорционально большое количество людей, лишенных стереопсиса. [33] В частности, было высказано предположение, что Рембрандт мог быть стереослепым .
Стереопсис был впервые объяснен Чарльзом Уитстоном в 1838 году: «…разум воспринимает трехмерный объект посредством двух непохожих изображений, проецируемых им на две сетчатки…». [34] Он признал, что, поскольку каждый глаз смотрит на визуальный мир со слегка разных горизонтальных позиций, изображение каждого глаза отличается от другого. Объекты, находящиеся на разном расстоянии от глаз, проецируют в два глаза изображения, которые различаются своим горизонтальным положением, что дает признак глубины горизонтального несоответствия, также известного как несоответствие сетчатки и бинокулярное несоответствие . Уитстон показал, что это эффективный сигнал глубины, поскольку он создает иллюзию глубины плоских изображений, которые отличаются только горизонтальным несоответствием. Чтобы отображать свои изображения отдельно для двух глаз, Уитстон изобрел стереоскоп .
Леонардо да Винчи также осознавал, что объекты, находящиеся на разном расстоянии от глаз, проецируют в двух глазах изображения, различающиеся своим горизонтальным положением, но пришел к выводу только, что это делает невозможным для художника реалистичное изображение глубины сцены. из одного полотна. [35] Леонардо выбрал в качестве ближнего объекта колонну с круглым поперечным сечением, а в качестве дальнего объекта — плоскую стену. Если бы он выбрал любой другой близкий объект, он мог бы обнаружить горизонтальное несоответствие его характеристик. [36] Его колонка была одним из немногих объектов, проецирующих идентичные изображения самого себя в обоих глазах.
Стереоскопия стала популярной в викторианские времена с изобретением Дэвидом Брюстером призматического стереоскопа . В сочетании с фотографией это означало, что были созданы десятки тысяч стереограмм .
Примерно до 1960-х годов исследования стереопсиса были посвящены изучению его пределов и его связи с единственностью зрения. В число исследователей входили Питер Людвиг Панум , Эвальд Геринг , Адельберт Эймс-младший и Кеннет Н. Огл .
В 1960-х годах Бела Юлеш изобрел стереограммы со случайными точками . [37] В отличие от предыдущих стереограмм, в которых каждая половина изображения показывала узнаваемые объекты, каждая половина изображения первых стереограмм со случайными точками представляла собой квадратную матрицу, состоящую примерно из 10 000 маленьких точек, причем каждая точка имела 50% вероятность быть черной или белой. Ни на одной половине изображения не было видно никаких узнаваемых объектов. Две половины изображения стереограммы со случайными точками были по существу идентичными, за исключением того, что в одной из них была квадратная область точек, сдвинутая по горизонтали на один или два диаметра точки, что давало горизонтальное несоответствие. Пробел, оставшийся в результате смещения, был заполнен новыми случайными точками, скрывающими сдвинутый квадрат. Тем не менее, когда две половины изображения рассматривались по одному на каждый глаз, квадратная область была почти сразу видна, находясь ближе или дальше от фона. Юлеш причудливо назвал квадрат циклопическим изображением в честь мифического циклопа , у которого был только один глаз. Это произошло потому, что в нашем мозгу как будто есть циклопический глаз, который может видеть циклопические стимулы, скрытые для каждого из наших реальных глаз. Стереограммы со случайными точками выявили проблему стереопсиса — проблему соответствия . Это значит, что любая точка на одной половине изображения может быть реально соединена со многими точками того же цвета на другой половине изображения. Наша зрительная система явно решает проблему соответствия, поскольку мы видим предполагаемую глубину вместо тумана ложных совпадений. Исследования начали понимать, как это произошло.
Также в 1960-х годах Хорас Барлоу , Колин Блейкмор и Джек Петтигрю обнаружили в зрительной коре кошки нейроны , рецептивные поля которых располагались в разных горизонтальных положениях в обоих глазах. [38] Это заложило нейронную основу стереопсиса. Их выводы были оспорены Дэвидом Хьюбелом и Торстеном Визелем , хотя в конечном итоге они признали это, когда обнаружили аналогичные нейроны в зрительной коре головного мозга обезьян . [39] В 1980-х годах Джан Поджио и другие обнаружили нейроны в V2 мозга обезьяны, которые реагировали на глубину стереограмм со случайными точками. [40]
В 1970-х годах Кристофер Тайлер изобрел автостереограммы — стереограммы со случайными точками, которые можно рассматривать без стереоскопа. [41] Это привело к появлению популярных фотографий «Волшебный глаз» .
В 1989 году Антонио Медина Пуэрта продемонстрировал с помощью фотографий, что изображения на сетчатке без несоответствия параллакса, но с разными тенями стереоскопически сливаются, придавая изображенной сцене ощущение глубины. Он назвал это явление «теневым стереопсисом». Таким образом, тени являются важным стереоскопическим сигналом для восприятия глубины. Он показал, насколько эффективен этот феномен, сделав две фотографии Луны в разное время и, следовательно, с разными тенями, благодаря чему Луна выглядела стереоскопически в 3D, несмотря на отсутствие каких-либо других стереоскопических сигналов. [42]
Стереоскоп — это устройство, с помощью которого каждому глазу могут быть представлены разные изображения, что позволяет стимулировать стереопсис двумя изображениями, по одному для каждого глаза. Это привело к многочисленным увлечениям стереопсисом, обычно вызванным появлением новых типов стереоскопов. В викторианские времена это был призменный стереоскоп (позволявший просматривать стереофотографии), а в 1920-е годы — красно -зеленые очки (позволявшие просматривать стереофильмы ). В 1939 году концепция призматического стереоскопа была переработана в технологически более сложный View-Master , который продолжает производиться и сегодня. В 1950-х годах поляризационные очки позволяли стереоскопизировать цветные фильмы. В 1990-х годах были представлены изображения Magic Eye ( автостереограммы ), которые не требовали стереоскопа, но полагались на то, что зрители использовали форму свободного слияния, так что каждый глаз просматривал разные изображения.
Стереопсис, по-видимому, обрабатывается в зрительной коре млекопитающих в бинокулярных клетках , имеющих рецептивные поля в разных горизонтальных положениях в двух глазах. Такая клетка активна только тогда, когда ее предпочтительный стимул находится в правильном положении в левом глазу и в правильном положении в правом глазу, что делает ее детектором несоответствия .
Когда человек смотрит на объект, два глаза сходятся так, что объект появляется в центре сетчатки обоих глаз. Другие объекты вокруг основного объекта кажутся смещенными относительно основного объекта. В следующем примере, хотя основной объект (дельфин) остается в центре двух изображений в двух глазах, куб смещается вправо на изображении левого глаза и смещается влево на изображении правого глаза.
Поскольку каждый глаз находится в разном горизонтальном положении, каждый из них имеет немного разную перспективу на сцену, создавая разные изображения на сетчатке . Обычно наблюдаются не два изображения, а один вид сцены, явление, известное как единство видения. Тем не менее, стереопсис возможен при двоении в глазах. Кеннет Огл назвал эту форму стереопсиса качественным стереопсисом . [43]
Если изображения сильно различаются (например, из-за косоглазия или представления разных изображений в стереоскопе ) , то можно увидеть одно изображение за раз - явление, известное как бинокулярное соперничество .
Существует эффект гистерезиса , связанный со стереопсисом. [44] После стабилизации слияния и стереопсиса слияние и стереопсис могут сохраняться, даже если два изображения раздвигаются медленно и симметрично до определенной степени в горизонтальном направлении. В вертикальном направлении наблюдается аналогичный, но меньший эффект. Этот эффект, впервые продемонстрированный на стереограмме случайных точек , первоначально был интерпретирован как расширение зоны слияния Панума . [45] Позже было показано, что эффект гистерезиса выходит далеко за пределы зоны слияния Панума, [46] и что стереоскопическая глубина может восприниматься на стереограммах со случайными линиями, несмотря на наличие циклодиспропорций около 15 градусов, и это было интерпретировано как стереопсис. с диплопией . [47]
В нормальных обстоятельствах глубина, определяемая стереопсисом, согласуется с другими признаками глубины, такими как параллакс движения (когда наблюдатель движется, глядя на одну точку сцены, точка фиксации , точки, расположенные ближе и дальше, чем точка фиксации, кажутся движущимися против или с движением, соответственно, со скоростями, пропорциональными расстоянию от точки фиксации) и графическими подсказками, такими как наложение (более близкие объекты закрывают более удаленные объекты) и знакомый размер (более близкие объекты кажутся больше, чем более дальние объекты). Однако, используя стереоскоп, исследователи смогли противостоять различным признакам глубины, включая стереопсис. Наиболее радикальной версией этого является псевдоскопия , при которой полуизображения стереограмм меняются местами между глазами, обращая вспять бинокулярное несоответствие. Уитстон (1838) обнаружил, что наблюдатели все еще могут оценить общую глубину сцены в соответствии с графическими подсказками. Стереоскопическая информация соответствовала общей глубине. [34]
Компьютерное стереозрение является частью области компьютерного зрения . Иногда его используют в мобильной робототехнике для обнаружения препятствий. Примеры применения включают марсоход ExoMars и хирургическую робототехнику. [48]
Две камеры фотографируют одну и ту же сцену, но их разделяет расстояние – точно так же, как наши глаза. Компьютер сравнивает изображения, сдвигая два изображения друг над другом, чтобы найти совпадающие части. Сдвинутая сумма называется диспаритетом . Несоответствие, при котором объекты на изображении лучше всего совпадают, используется компьютером для расчета их расстояния.
У человека глаза меняют угол наклона в зависимости от расстояния до наблюдаемого объекта. Для компьютера это представляет собой значительную дополнительную сложность геометрических расчетов ( эпиполярная геометрия ). Фактически, самый простой геометрический случай — это когда плоскости изображения камеры находятся в одной плоскости. Альтернативно изображения могут быть преобразованы путем повторного проецирования посредством линейного преобразования, чтобы они находились в одной плоскости изображения. Это называется исправлением изображения .
Компьютерное стереозрение с множеством камер при фиксированном освещении называется структурой из движения . Техники, использующие фиксированную камеру и известное освещение, называются фотометрическими стереометодами или « формой из затенения ».
Многие [ какие? ] были предприняты попытки воспроизвести человеческое стереозрение на быстро меняющихся компьютерных дисплеях, и с этой целью в USPTO были поданы многочисленные патенты, относящиеся к 3D-телевидению и кино . По крайней мере, в США коммерческая деятельность, связанная с этими патентами, ограничивается исключительно грантополучателями и лицензиатами владельцев патентов, интересы которых обычно сохраняются в течение двадцати лет с момента подачи заявки.
Не считая 3D-телевидения и кино (для которых обычно требуется более одного цифрового проектора, движущиеся изображения которого механически связаны, в случае 3D-кинотеатра IMAX), будет предложено несколько стереоскопических ЖК-дисплеев [ когда? ] от Sharp [ почему? ] , который уже начал поставки ноутбука [ который? ] со встроенным стереоскопическим ЖК-дисплеем. Хотя более старые технологии требовали [ когда? ] пользователь должен надевать защитные очки или козырьки для просмотра изображений, созданных компьютером , или CGI, более новой технологии [ какой? ] имеет тенденцию использовать линзы или пластины Френеля поверх жидкокристаллических дисплеев, освобождая пользователя от необходимости надевать специальные очки .
В тестах на стереопсис (сокращенно: стереотесты ) каждому глазу показываются немного разные изображения, так что при наличии стереозрения воспринимается трехмерное изображение. Этого можно достичь с помощью вектографов (видимых в поляризационных очках), анаглифов (видимых в красно-зеленых очках), двояковыпуклых линз (видимых невооруженным глазом) или технологии отображения на голове . Тип изменений от одного глаза к другому может различаться в зависимости от того, какой уровень стереоостроты необходимо обнаружить. Таким образом, серия стереотестов для выбранных уровней представляет собой проверку стереоостроты .
Существует два типа распространенных клинических тестов на стереопсис и остроту стереоскопии: стереотесты со случайными точками и контурные стереотесты. В тестах стереопсиса со случайными точками используются изображения стереофигур, встроенные в фон из случайных точек. Контурные стереотесты используют изображения, на которых цели, представленные каждому глазу, разделены по горизонтали. [49]
Способность стереопсиса можно проверить, например, с помощью Lang-Stereotest , который состоит из стереограммы со случайными точками, на которой ряд параллельных полосок цилиндрических линз отпечатан в определенных формах, которые разделяют изображения, видимые каждым глазом. эти области [50] аналогичны голограмме . Без стереопсиса изображение выглядит только как поле случайных точек, но формы становятся различимыми с увеличением стереопсиса и обычно состоят из кошки (что указывает на способность стереопсиса 1200 секунд дуги несоответствия сетчатки), звезды ( 600 угловых секунд) и автомобиль (550 угловых секунд). [50] Для стандартизации результатов изображение следует рассматривать на расстоянии 40 см от глаза точно в фронтопараллельной плоскости. [50] Хотя для большинства стереотестов со случайными точками, таких как стереотест со случайными точками «E» или TNO-стереотест, для тестирования требуются специальные очки (т.е. с поляризационными или красно-зелеными очками), стереотест Ланг работает без использования специальных очков, тем самым облегчая применение у детей раннего возраста. [50]
Примерами контурных стереотестов являются стереотесты Титмуса, наиболее известным примером является стереотест с мухой Синица, где изображение мухи отображается с различиями по краям. Пациент использует 3D-очки, чтобы посмотреть на изображение и определить, можно ли увидеть трехмерную фигуру. Величина несоответствия изображений варьируется, например, 400–100 угловых секунд и 800–40 угловых секунд. [51]
Дефицит стереопсиса может быть полным (тогда называемым стереослепотой ) или более или менее нарушенным. Причины включают слепоту на один глаз, амблиопию и косоглазие .
Зрительная терапия — один из методов лечения людей с отсутствием стереопсиса. Зрительная терапия позволит людям улучшить свое зрение с помощью нескольких упражнений, например, путем укрепления и улучшения движения глаз. [52] Недавно появились данные о том, что острота стереоскопического изображения может быть улучшена у людей с амблиопией посредством перцептивного обучения ( см. также: Лечение амблиопии ). [53] [54]
Существуют убедительные доказательства существования стереопсиса во всем животном мире . Встречается у многих млекопитающих, птиц, рептилий, амфибий, рыб, ракообразных, пауков и насекомых. [1] У ротоногих даже есть стереопсис только одного глаза. [55]