Рендеринг с высоким динамическим диапазоном ( рендеринг HDRR или HDR ), также известный как освещение с высоким динамическим диапазоном , представляет собой рендеринг сцен компьютерной графики с использованием расчетов освещения , выполненных в высоком динамическом диапазоне (HDR). Это позволяет сохранить детали, которые могут быть потеряны из-за ограниченных коэффициентов контрастности . Видеоигры , а также компьютерные фильмы и спецэффекты выигрывают от этого, поскольку создают более реалистичные сцены, чем с более простыми моделями освещения.
Компания-производитель графических процессоров Nvidia суммирует мотивацию HDR в трех пунктах: яркие вещи могут быть действительно яркими, темные вещи могут быть действительно темными, и детали можно увидеть в обоих случаях. [1]
Использование изображений с высоким динамическим диапазоном (HDRI) в компьютерной графике было введено Грегом Уордом в 1985 году с его программным обеспечением для рендеринга и моделирования освещения Radiance с открытым исходным кодом , которое создало первый формат файла, сохраняющий изображение с высоким динамическим диапазоном. HDRI томился более десятилетия, сдерживаемый ограниченными вычислительными мощностями, хранилищем и методами захвата. Только недавно была разработана технология для практического использования HDRI. [2] [3]
В 1990 году Накаме и др. представили модель освещения для симуляторов вождения, которая подчеркнула необходимость обработки с высоким динамическим диапазоном в реалистичных симуляциях. [4]
В 1995 году Грег Спенсер представил на конференции SIGGRAPH « Физически обоснованные эффекты бликов для цифровых изображений» , предложив количественную модель бликов и засветов в человеческом глазу. [5]
В 1997 году Пол Дебевек представил на конференции SIGGRAPH работу «Восстановление карт яркости с высоким динамическим диапазоном из фотографий» [6] , а в следующем году — работу «Рендеринг синтетических объектов в реальные сцены» . [7] Эти две работы заложили основу для создания HDR- световых зондов локации и последующего использования этого зонда для освещения визуализированной сцены.
С тех пор HDRI и HDRL ( освещение на основе изображений с высоким динамическим диапазоном ) используются во многих ситуациях в 3D-сценах, в которых для вставки 3D-объекта в реальную среду требуются данные светового зонда для обеспечения реалистичных световых решений.
В игровых приложениях Riven: The Sequel to Myst в 1997 году использовал шейдер постобработки HDRI, напрямую основанный на работе Спенсера. [8] После E3 2003 года Valve выпустила демо-ролик своего движка Source, визуализирующего городской пейзаж в высоком динамическом диапазоне. [9] Этот термин не использовался повсеместно до E3 2004 года, где он привлек гораздо больше внимания, когда Epic Games продемонстрировала Unreal Engine 3 , а Valve анонсировала Half-Life 2: Lost Coast в 2005 году в сочетании с движками с открытым исходным кодом, такими как OGRE 3D , и играми с открытым исходным кодом, такими как Nexuiz .
Одним из основных преимуществ HDR-рендеринга является сохранение деталей в сцене с большим коэффициентом контрастности. Без HDR слишком темные области обрезаются до черного, а слишком яркие области обрезаются до белого. Они представлены аппаратно как значения с плавающей точкой 0,0 и 1,0 для чистого черного и чистого белого соответственно.
Другим аспектом HDR-рендеринга является добавление перцептуальных сигналов, которые увеличивают видимую яркость. HDR-рендеринг также влияет на то, как свет сохраняется в оптических явлениях, таких как отражения и преломления , а также в прозрачных материалах, таких как стекло. При LDR-рендеринге очень яркие источники света в сцене (например, солнце) ограничены 1,0. Когда этот свет отражается, результат должен быть меньше или равен 1,0. Однако при HDR-рендеринге очень яркие источники света могут превышать яркость 1,0, чтобы имитировать их фактические значения. Это позволяет отражениям от поверхностей поддерживать реалистичную яркость для ярких источников света.
Человеческий глаз может воспринимать сцены с очень высоким динамическим контрастным отношением , около 1 000 000:1. Адаптация достигается частично за счет корректировки радужной оболочки и медленных химических изменений, которые занимают некоторое время (например, задержка в способности видеть при переключении с яркого освещения на кромешную тьму). В любой момент времени статический диапазон глаза меньше, около 10 000:1. Однако это все еще выше, чем статический диапазон большинства технологий отображения. [ необходима цитата ]
Хотя многие производители заявляют очень высокие цифры, плазменные дисплеи , жидкокристаллические дисплеи и дисплеи на ЭЛТ могут обеспечить лишь часть коэффициента контрастности, наблюдаемого в реальном мире, и эти показатели обычно измеряются в идеальных условиях. [ необходима цитата ] Одновременная контрастность реального контента при нормальных условиях просмотра значительно ниже.
Некоторое увеличение динамического диапазона в ЖК-мониторах может быть достигнуто путем автоматического уменьшения подсветки для темных сцен. Например, LG называет эту технологию «Digital Fine Contrast»; [10] Samsung описывает ее как «динамический коэффициент контрастности». Другой метод заключается в использовании массива более ярких и более темных светодиодных подсветок, например, с помощью систем, разработанных BrightSide Technologies. [11]
OLED- дисплеи имеют лучшие возможности динамического диапазона, чем ЖК-дисплеи, похожие на плазму, но с меньшим энергопотреблением. Rec. 709 определяет цветовое пространство для HDTV , а Rec. 2020 определяет большее, но все еще неполное цветовое пространство для телевидения сверхвысокой четкости .
Расплывчатость света — это результат рассеивания в хрусталике глаза человека, который человеческий мозг интерпретирует как яркое пятно на сцене. Например, яркий свет на заднем плане будет казаться перетекающим на объекты на переднем плане. Это можно использовать для создания иллюзии, чтобы яркое пятно казалось ярче, чем оно есть на самом деле. [5]
Блики — это дифракция света в хрусталике глаза человека, в результате которой возникают «лучи» света, исходящие от небольших источников света, а также могут вызывать некоторые хроматические эффекты. Они наиболее заметны на точечных источниках света из-за их малого угла обзора. [5]
Типичные устройства отображения не могут отображать свет такой же яркий, как Солнце, а окружающее освещение в помещении не позволяет им отображать настоящий черный цвет. Таким образом, системы рендеринга HDR должны отображать полный динамический диапазон того, что глаз увидит в визуализированной ситуации, на возможности устройства. Это тональное отображение выполняется относительно того, что видит камера виртуальной сцены, в сочетании с несколькими полноэкранными эффектами , например, для имитации пыли в воздухе, которая освещается прямым солнечным светом в темной пещере, или рассеивания в глазу.
Для имитации этих эффектов можно совместно использовать тональную компрессию и шейдеры цветения .
Тональное отображение в контексте графического рендеринга — это метод, используемый для отображения цветов из высокого динамического диапазона (в котором выполняются расчеты освещения) в более низкий динамический диапазон, который соответствует возможностям желаемого устройства отображения. Обычно отображение является нелинейным — оно сохраняет достаточный диапазон для темных цветов и постепенно ограничивает динамический диапазон для ярких цветов. Этот метод часто создает визуально привлекательные изображения с хорошей общей детализацией и контрастностью. Существуют различные операторы тонального отображения, начиная от простых методов реального времени, используемых в компьютерных играх, и заканчивая более сложными методами, которые пытаются имитировать перцептивную реакцию зрительной системы человека.
В настоящее время HDRR распространен в играх , в первую очередь для ПК , Microsoft Xbox 360 и Sony PlayStation 3. Он также был смоделирован на системах PlayStation 2 , GameCube , Xbox и Amiga . Sproing Interactive Media объявила, что их новый игровой движок Athena для Wii будет поддерживать HDRR, добавив Wii в список систем, которые его поддерживают.
В настольных издательских системах и играх цветовые значения часто обрабатываются несколько раз. Поскольку это включает умножение и деление (которые могут накапливать ошибки округления ), полезно иметь расширенную точность и диапазон 16-битных целых или 16-битных форматов с плавающей точкой . Это полезно независимо от вышеупомянутых ограничений в некоторых аппаратных средствах.
Сложные шейдерные эффекты начали свое существование с выпуском Shader Model 1.0 с DirectX 8. Shader Model 1.0 освещал 3D-миры с помощью так называемого стандартного освещения. Однако стандартное освещение имело две проблемы:
24 декабря 2002 года Microsoft выпустила новую версию DirectX . DirectX 9.0 представила Shader Model 2.0, которая предлагала один из необходимых компонентов для обеспечения рендеринга изображений с высоким динамическим диапазоном: точность освещения не ограничивалась только 8 битами. Хотя 8 бит были минимальным значением в приложениях, программисты могли выбрать до 24 бит для точности освещения. Однако все вычисления по-прежнему были целочисленными. Одной из первых видеокарт с изначальной поддержкой DirectX 9.0 была ATI Radeon 9700 , хотя этот эффект не был запрограммирован в играх в течение многих лет после этого. 23 августа 2003 года Microsoft обновила DirectX до DirectX 9.0b, что позволило использовать профиль Pixel Shader 2.x (Extended) для серии ATI Radeon X и серии NVIDIA GeForce FX графических процессоров.
9 августа 2004 года Microsoft снова обновила DirectX до DirectX 9.0c. Это также раскрыло профиль Shader Model 3.0 для языка шейдеров высокого уровня (HLSL). Точность освещения Shader Model 3.0 имеет минимум 32 бита по сравнению с 8-битным минимумом 2.0. Кроме того, все вычисления точности освещения теперь основаны на числах с плавающей точкой . NVIDIA заявляет, что коэффициент контрастности с использованием Shader Model 3.0 может достигать 65535:1 при использовании 32-битной точности освещения. Сначала HDRR был возможен только на видеокартах, поддерживающих эффекты Shader-Model-3.0, но разработчики программного обеспечения вскоре добавили совместимость с Shader Model 2.0. В качестве примечания, когда HDRR упоминается как Shader Model 3.0 HDR, на самом деле он выполняется путем смешивания FP16. Смешивание FP16 не является частью Shader Model 3.0, но поддерживается в основном картами, также поддерживающими Shader Model 3.0 (исключения включают серию GeForce 6200). Смешивание FP16 может использоваться как более быстрый способ рендеринга HDR в видеоиграх.
Shader Model 4.0 — это функция DirectX 10, выпущенная вместе с Windows Vista. Shader Model 4.0 допускает 128-битный HDR-рендеринг, в отличие от 64-битного HDR в Shader Model 3.0 (хотя это теоретически возможно в Shader Model 3.0).
Shader Model 5.0 — это функция DirectX 11. Она обеспечивает сжатие HDR-текстур в соотношении 6:1 без заметных потерь, что было распространено в предыдущих версиях методов сжатия HDR-текстур DirectX.
Разрабатывать HDRR с помощью шейдера GLSL можно, начиная с OpenGL 1.4.