stringtranslate.com

Световое поле

Световое поле — это векторная функция , которая описывает количество света , проходящего во всех направлениях через каждую точку пространства. Пространство всех возможных световых лучей определяется пятимерной пленоптической функцией , а величина каждого луча определяется его яркостью . Майкл Фарадей был первым, кто предложил интерпретировать свет как поле, подобное магнитным полям, над которыми он работал. [1] Термин « световое поле» был введен Андреем Гершуном в классической статье 1936 года о радиометрических свойствах света в трехмерном пространстве.

Современные подходы к отображению светового поля предполагают совместную разработку оптических элементов и компрессионные вычисления для достижения более высокого разрешения, повышенной контрастности, более широких полей зрения и других преимуществ. [2]

Термин «поле излучения» также может использоваться для обозначения аналогичных концепций. Этот термин используется в современных исследованиях, таких как поля нейронного излучения .

Пленоптическая функция

Излучение L вдоль луча можно рассматривать как количество света, проходящего по всем возможным прямым линиям через трубку, размер которой определяется ее телесным углом и площадью поперечного сечения.

Для геометрической оптики , т. е. для некогерентного света и объектов, размер которых превышает длину волны света, основным носителем света является луч . Мерой количества света, проходящего вдоль луча, является яркость , обозначаемая L и измеряемая в Вт·ср -1 ·м -2 , т.е. ваттах (Вт) на стерадиан (ср) на квадратный метр (м 2 ). Стерадиан является мерой телесного угла , а квадратные метры используются как мера площади поперечного сечения, как показано справа.

Параметризация луча в трехмерном пространстве по положению ( x , y , z ) и направлению ( θ , φ ).

Яркость всех таких лучей в области трехмерного пространства, освещенной неизменным расположением огней, называется пленоптической функцией. [3] Функция пленоптического освещения — это идеализированная функция, используемая в компьютерном зрении и компьютерной графике для выражения изображения сцены из любой возможной позиции просмотра, под любым углом обзора в любой момент времени. На практике он не используется в вычислительных целях, но концептуально полезен для понимания других концепций зрения и графики. [4] Поскольку лучи в пространстве могут быть параметризованы тремя координатами x , y и z и двумя углами θ и φ , как показано слева, это пятимерная функция, то есть функция над пятимерной величиной. многообразие , эквивалентное произведению трехмерного евклидова пространства и двумерной сферы .

Суммирование векторов освещенности D 1 и D 2 , возникающих от двух источников света I 1 и I 2 , дает результирующий вектор D , имеющий показанную величину и направление. [5]

Световое поле в каждой точке пространства можно рассматривать как бесконечный набор векторов, по одному на каждое направление, падающих на точку, с длинами, пропорциональными их яркости.

Интегрирование этих векторов по любому набору источников света или по всей сфере направлений дает одно скалярное значение — общую освещенность в этой точке и результирующее направление. На рисунке показан этот расчет для случая двух источников света. В компьютерной графике эта векторная функция трехмерного пространства называется векторным полем освещенности. [6] Направление вектора в каждой точке поля можно интерпретировать как ориентацию плоской поверхности, расположенной в этой точке, чтобы наиболее ярко ее осветить.

Более высокая размерность

Время, длину волны и угол поляризации можно рассматривать как дополнительные измерения, что соответственно дает функции более высокой размерности.

Световое поле 4D

Излучение вдоль луча остается постоянным, если нет блокаторов.

В пленоптической функции, если область интереса содержит вогнутый объект (например, чашеобразную руку), то свет, выходящий из одной точки объекта, может пройти лишь небольшое расстояние, прежде чем другая точка объекта заблокирует его. Ни одно практическое устройство не могло бы измерить функцию в такой области.

Однако для мест за пределами выпуклой оболочки объекта (например, термоусадочной пленки) пленоптическая функция может быть измерена путем захвата нескольких изображений. В этом случае функция содержит избыточную информацию, поскольку яркость луча остается постоянной по всей его длине. Избыточная информация имеет ровно одно измерение, оставляя четырехмерную функцию, которую по-разному называют фотополем, четырехмерным световым полем [7] или люмиграфом. [8] Формально поле определяется как излучение вдоль лучей в пустом пространстве.

Набор лучей в световом поле можно параметризовать различными способами. Наиболее распространенной является двухплоскостная параметризация. Хотя эта параметризация не может представлять все лучи, например, лучи, параллельные двум плоскостям, если плоскости параллельны друг другу, она тесно связана с аналитической геометрией перспективного изображения. Простой способ представить двухплоскостное световое поле — это набор перспективных изображений первой плоскости (и любых объектов, которые могут лежать по обе стороны от нее или за ее пределами), каждое из которых взято с позиции наблюдателя на ультрафиолетовой плоскости. Световое поле, параметризованное таким образом, иногда называют световой пластиной.

Некоторые альтернативные параметризации четырехмерного светового поля, которое представляет поток света через пустую область трехмерного пространства. Слева: точки на плоскости или изогнутой поверхности и направления, выходящие из каждой точки. Центр: пары точек на поверхности сферы. Справа: пары точек на двух плоскостях в общем (то есть любом) положении.

Звук аналоговый

Аналогом 4D светового поля для звука является звуковое поле или волновое поле , как при синтезе волнового поля , а соответствующей параметризацией является интеграл Кирхгофа-Гельмгольца , который утверждает, что при отсутствии препятствий звуковое поле во времени определяется давлением на самолет. Таким образом, это два измерения информации в любой момент времени и трехмерное поле во времени.

Эта двумерность, по сравнению с кажущейся четырехмерностью света, связана с тем, что свет распространяется лучами (0D в определенный момент времени, 1D во времени), тогда как согласно принципу Гюйгенса-Френеля фронт звуковой волны можно смоделировать как сферические волны (2D в определенный момент времени, 3D во времени): свет движется в одном направлении (2D информации), а звук распространяется во всех направлениях. Однако свет, распространяющийся в невакуумных средах, может рассеиваться аналогичным образом, и необратимость или потеря информации при рассеянии различимы в кажущейся потере размера системы.

Перефокусировка изображения

Поскольку световое поле предоставляет пространственную и угловую информацию, мы можем изменить положение фокальных плоскостей после воздействия, что часто называют перефокусировкой . Принцип перефокусировки заключается в получении обычных двумерных фотографий из светового поля посредством интегрального преобразования. Преобразование принимает на вход световое поле и генерирует фотографию, сфокусированную на определенной плоскости.

Предполагая , что представляет собой четырехмерное световое поле, которое записывает световые лучи, перемещающиеся из положения на первой плоскости в положение на второй плоскости, где - расстояние между двумя плоскостями, двумерную фотографию на любой глубине можно получить с помощью следующего интегрального преобразования : [9]

,

или более кратко,

,

где , , и – оператор фотографии.

На практике эту формулу нельзя использовать напрямую, поскольку пленоптическая камера обычно фиксирует дискретные образцы светового поля , и, следовательно, для вычисления необходима повторная выборка (или интерполяция) . Другая проблема – высокая сложность вычислений. Чтобы вычислить двумерную фотографию по четырехмерному световому полю, сложность формулы составляет 0 . [9]

Фотография среза Фурье

Один из способов уменьшить сложность вычислений — принять концепцию теоремы Фурье о срезах : [9] Оператор фотографии можно рассматривать как сдвиг, за которым следует проекция. Результат должен быть пропорционален расширенному двумерному срезу четырехмерного преобразования Фурье светового поля. Точнее, перефокусированное изображение можно создать из четырехмерного спектра Фурье светового поля путем извлечения двумерного среза, применения обратного двумерного преобразования и масштабирования. Асимптотическая сложность алгоритма равна .

Дискретное фокальное преобразование стека

Еще один способ эффективного расчета двумерных фотографий — использование дискретного преобразования фокусного стека (DFST). [10] DFST предназначен для создания коллекции перефокусированных 2-D фотографий, или так называемого фокусного стека . Этот метод может быть реализован с помощью быстрого дробного преобразования Фурье (FrFT).

Оператор дискретной фотографии определяется следующим образом для светового поля , выбранного в 4-D сетке :

Поскольку обычно DFST не находится в четырехмерной сетке, для вычисления внесеточных значений используется тригонометрическая интерполяция .

Алгоритм состоит из таких шагов:

Методы создания световых полей

Световые поля являются фундаментальным представлением света и имеют множество методов его определения.

В компьютерной графике световые поля обычно создаются либо путем визуализации 3D-модели , либо путем фотографирования реальной сцены. В любом случае, чтобы создать световое поле, необходимо получить виды для большого набора точек обзора. В зависимости от параметризации эта коллекция обычно охватывает некоторую часть линии, круга, плоскости, сферы или другой формы, хотя возможны и неструктурированные коллекции. [11]

Устройства для фотографического захвата световых полей могут включать в себя движущуюся портативную камеру или камеру с роботизированным управлением, [12] дугу камер (как в эффекте времени пули , используемом в «Матрице »), плотный массив камер, [13] портативные камеры , [14] [15] микроскопы, [16] или другая оптическая система. [17]

Сколько изображений должно быть в светлом поле? Самое большое известное световое поле ( статуи Ночи Микеланджело ) [18] содержит 24 000 1,3-мегапиксельных изображений. На более глубоком уровне ответ зависит от приложения. Чтобы рендеринг светового поля полностью захватил непрозрачный объект, необходимо сделать изображения как минимум спереди и сзади. Менее очевидно, что для объекта, расположенного по обе стороны от st- плоскости, мелкоотстоящие изображения должны быть сделаны в ультрафиолетовой плоскости (в двухплоскостной параметризации, показанной выше).

Количество и расположение изображений в световом поле, а также разрешение каждого изображения вместе называются «выборкой» четырехмерного светового поля. [19] Также интерес представляют эффекты окклюзии, [20] освещения и отражения. [21]

Приложения

Выбранные приложения:

Направленный вниз источник света (FF') создает световое поле, векторы освещенности которого изгибаются наружу. Используя математический анализ, Гершун смог вычислить интенсивность излучения, падающую на точки (P 1 , P 2 ) на поверхности. [22] )

Смотрите также

Примечания

  1. Фарадей, Майкл (30 апреля 2009 г.). «ЛИВ. Мысли о лучевых вибрациях». Философский журнал . Серия 3. 28 (188): 345–350. дои : 10.1080/14786444608645431. Архивировано из оригинала 18 февраля 2013 г.
  2. ^ Вецштейн 2012, 2011; Ланман 2011, 2010 г.
  3. ^ Адельсон 1991
  4. ^ Вонг 2002
  5. ^ Гершун, рис. 17.
  6. ^ Арво, 1994 г.
  7. ^ Левой 1996 г.
  8. ^ Гортлер 1996
  9. ^ abc Нг, Рен (2005). «Фурье-фотография». Доклады ACM SIGGRAPH 2005 . Нью-Йорк, Нью-Йорк, США: ACM Press. стр. 735–744. дои : 10.1145/1186822.1073256. ISBN 9781450378253. S2CID  1806641.
  10. ^ Нава, Ф. Перес; Маричал-Эрнандес, JG; Родригес-Рамос, JM (август 2008 г.). «Дискретное фокальное стек-преобразование». 2008 16-я Европейская конференция по обработке сигналов : 1–5.
  11. ^ Бюлер 2001
  12. ^ Левой 2002
  13. ^ Канада 1998; Ян 2002; Уилберн 2005 г.
  14. ^ около 2005 г.
  15. ^ Георгиев 2006; Марва 2013
  16. ^ Левой 2006 г.
  17. ^ Боллес 1987
  18. ^ "Световое поле статуи Ночи Микеланджело" . Accademia.stanford.edu . Проверено 08 февраля 2022 г.
  19. ^ Чай (2000)
  20. ^ Дюран (2005)
  21. ^ Рамамурти (2006)
  22. ^ Гершун, рис 24.
  23. ^ Эшдаун 1993
  24. ^ Чавес 2015; Уинстон 2005 г.
  25. ^ Левой 1996; Гортлер 1996 г.
  26. ^ Зомет 2003
  27. ^ Ю и Макмиллан, 2004 г.
  28. ^ Радемахер 1998 г.
  29. ^ Исаксен 2000
  30. ^ Вайш 2005 г.
  31. ^ Джавиди 2002; Матусик 2004 г.
  32. ^ Гросеник, 2009, 2017; Перес, 2015 г.
  33. ^ Пегард, 2016
  34. ^ Гросеник, 2017.
  35. ^ abc Леффингвелл, 2018 г.
  36. ^ Милденхолл, 2020 г.
  37. ^ Руднев, Виктор; Эльгариб, Мохамед; Смит, Уильям; Лю, Линцзе; Голяник, Владислав; Теобальт, Кристиан (21 июля 2022 г.). «NeRF для переосвещения уличных сцен». Европейская конференция по компьютерному зрению (ECCV) 2022 : 1–22. arXiv : 2112.05140 .
  38. ^ Шринивасан, Пратуал; Дэн, Боян; Чжан, Сюмин; Танчик, Мэтью; Милденхолл, Бен; Бэррон, Джонатан (7 декабря 2020 г.). «NeRV: нейронные поля отражения и видимости для повторного освещения и синтеза представлений». ЦВПР : 1–12. arXiv : 2012.03927 .
  39. ^ Ю и Фридович-Кейл, 2021 г.
  40. ^ Кербл, Бернхард; Копанас, Георгиос; Леймкюлер, Томас; Дреттакис, Джордж (8 августа 2023 г.). «3D Gaussian Splatting для рендеринга поля излучения в реальном времени». arXiv : 2308.04079 [cs.GR].
  41. ^ Чжан, Цзинъян; Яо, Яо; Ли, Шивэй; Лю, Цзинбо; Фанг, Тиан; Маккиннон, Дэвид; Цинь, Янхай; Цюань, Лонг (30 марта 2023 г.). «NeILF++: взаимоотражающие световые поля для геометрии и оценки материалов». стр. 1–5. arXiv : 2303.17147 [cs.CV].
  42. ^ Галле 1991, 1994
  43. ^ Талвала 2007
  44. ^ Аб Раскар 2008

Рекомендации

Теория

Анализ

Камеры

Дисплеи

Архивы

Приложения