Частота кадров (обычно выражается вкадров в секунду илиFPS) — это обычночастота(скорость), с которойзахватываются или отображаютсяизображения(кадрыЭто определение применимо ккино-ивидеокамерам,компьютерной анимацииизахвата движения. В этих контекстах частота кадров может использоваться взаимозаменяемо счастота кадров ичастота обновления, которые выражаются вгерцах. Кроме того, в контексте производительности компьютерной графики FPS — это скорость, с которой система, особенно графическийпроцессор, способна генерировать кадры, а частота обновления — это частота, с которой дисплей показывает завершенные кадры. [1]В спецификациях электронных камер под частотой кадров понимается максимально возможная частота кадров, но на практике другие настройки (например, время экспозиции) могут уменьшить фактическую частоту до меньшего значения, чем частота кадров.
Временная чувствительность и разрешающая способность человеческого зрения варьируются в зависимости от типа и характеристик зрительного стимула и различаются у разных людей. Зрительная система человека может обрабатывать от 10 до 12 изображений в секунду и воспринимать их индивидуально, тогда как более высокие скорости воспринимаются как движение. [2] Модулированный свет (например, от монитора компьютера ) большинство участников исследований воспринимает как стабильный, если его частота превышает 50 Гц. Такое восприятие модулированного света как устойчивого известно как порог слияния мерцаний . Однако, когда модулированный свет неоднороден и содержит изображение, порог слияния мельканий может быть намного выше — сотни герц. [3] Что касается распознавания изображений , было обнаружено, что люди узнают конкретное изображение в непрерывной серии различных изображений, каждое из которых длится всего 13 миллисекунд. [4] Стойкость зрения иногда объясняется очень короткими зрительными стимулами длительностью в одну миллисекунду, имеющим воспринимаемую продолжительность от 100 до 400 мс. Несколько очень коротких стимулов иногда воспринимаются как один стимул, например, зеленая вспышка света длительностью 10 мс, за которой сразу же следует красная вспышка света длительностью 10 мс, воспринимаемая как одиночная желтая вспышка света. [5]
В ранних немых фильмах частота кадров составляла от 16 до 24 кадров в секунду (fps), [6] но, поскольку камеры приводились вручную, частота часто менялась во время сцены, чтобы соответствовать настроению. Киномеханики также могли изменять частоту кадров в кинотеатре, регулируя реостат, управляющий напряжением, питающим механизм подачи пленки в проекторе . [7] Кинокомпании часто хотели, чтобы в кинотеатрах показывали немые фильмы с более высокой частотой кадров, чем при их съемке. [8] Такой частоты кадров было достаточно для ощущения движения, но оно воспринималось как прерывистое движение. Чтобы свести к минимуму воспринимаемое мерцание, в проекторах использовались двух- и трехлепестковые затворы , поэтому каждый кадр отображался два или три раза, что увеличивало частоту мерцания до 48 или 72 герц и снижало нагрузку на глаза. Томас Эдисон сказал, что 46 кадров в секунду — это минимум, необходимый глазу для восприятия движения: «Все, что меньше, будет напрягать глаз». [9] [10] В середине-конце 1920-х годов частота кадров в немом кино увеличилась до 20–26 кадров в секунду. [9]
Когда в 1926 году была представлена звуковая пленка , изменения светочувствительности пленки больше не допускались, поскольку человеческое ухо более чувствительно, чем глаз, к изменениям частоты. Многие кинотеатры показывали немое кино со скоростью от 22 до 26 кадров в секунду, поэтому индустрия в качестве компромисса выбрала 24 кадра в секунду для звукового кино. [11] С 1927 по 1930 год, когда различные студии обновляли оборудование, скорость 24 кадра в секунду стала стандартной для 35-мм звукового фильма. [2] При скорости 24 кадра в секунду фильм проходит через проектор со скоростью 456 миллиметров (18,0 дюймов) в секунду. Это позволило простым двухлопастным ставням давать проецируемую серию изображений со скоростью 48 в секунду, что соответствовало рекомендации Эдисона. Многие современные 35-мм кинопроекторы используют трехлепестковые затворы, обеспечивающие скорость 72 изображения в секунду — каждый кадр отображается на экране трижды. [9]
В рисованной анимации движущиеся персонажи часто снимаются «по двое», то есть на каждые два кадра фильма показывается один рисунок (который обычно идет со скоростью 24 кадра в секунду), то есть в секунду происходит всего 12 рисунков. [12] Несмотря на низкую скорость обновления изображения, плавность изображения является удовлетворительной для большинства объектов. Однако, когда персонажу требуется выполнить быстрое движение, обычно необходимо вернуться к анимации «на единицах», поскольку «двойки» слишком медленны, чтобы адекватно передать движение. Сочетание этих двух технологий обманывает глаз без ненужных производственных затрат. [13]
Анимация для большинства « субботних утренних мультфильмов » производилась максимально дешево и чаще всего снималась на «тройки» или даже «четверки», т. е. три-четыре кадра на рисунок. Это означает всего 8 или 6 рисунков в секунду соответственно. Аниме также обычно рисуется на тройках или двойках. [14] [15]
Из-за частоты сети электросетей аналоговое телевещание было развито с частотой кадров 50 Гц (большая часть мира) или 60 Гц (Канада, США, Япония, Южная Корея). Частота электросети была чрезвычайно стабильной и поэтому ее было логично использовать для синхронизации.
Внедрение технологии цветного телевидения привело к необходимости снизить частоту 60 кадров в секунду на 0,1%, чтобы избежать « ползания точек » — артефакта отображения, появляющегося на устаревших черно-белых дисплеях и проявляющегося на поверхностях с высокой насыщенностью цвета. Было установлено, что за счет снижения частоты кадров на 0,1% нежелательный эффект был сведен к минимуму. [ оригинальное исследование? ]
По состоянию на 2021 год [обновлять]стандарты передачи видео в Северной Америке, Японии и Южной Корее по-прежнему основаны на 60/1,001 ≈ 59,94 изображения в секунду. Обычно используются изображения двух размеров: 1920×1080 («1080i/p») и 1280×720 («720p»). Как ни странно, для чересстрочных форматов обычно указывается половина их частоты изображения, 29,97/25 кадров в секунду, а также удвоенная высота изображения, но эти утверждения являются чисто пользовательскими; в каждом формате создается 60 изображений в секунду. Разрешение 1080i дает 59,94 или 50 изображений 1920×540, каждое из которых сжимается до половины высоты в процессе фотографирования и растягивается обратно, чтобы заполнить экран при воспроизведении на телевизоре. Формат 720p создает 59,94/50 или 29,97/25 изображений 1280×720p без сжатия, поэтому расширение или сжатие изображения не требуется. Эта путаница была широко распространена в отрасли на заре программного обеспечения для цифрового видео: большая часть программного обеспечения была написана неправильно, а разработчики полагали, что каждую секунду ожидалось только 29,97 изображений, что было неверно. Хотя это было правдой, каждый элемент изображения опрашивался и отправлялся только 29,97 раз в секунду, местоположение пикселя непосредственно под ним было опрошено на 1/60 секунды позже, являясь частью совершенно отдельного изображения для следующего кадра длительностью 1/60 секунды. . [ оригинальное исследование? ]
При исходной частоте 24 кадра в секунду фильм не мог отображаться на видео с частотой 60 Гц без необходимого процесса преобразования , что часто приводило к «дрожанию»: чтобы преобразовать 24 кадра в секунду в 60 кадров в секунду, каждый нечетный кадр повторяется, воспроизводясь дважды. при этом каждый четный кадр увеличивается втрое. Это создает неравномерное движение, которое выглядит стробоскопическим. Другие преобразования имеют аналогичное неравномерное удвоение кадров. Новые стандарты видео поддерживают частоту 120, 240 или 300 кадров в секунду, поэтому кадры могут быть равномерно дискретизированы для стандартных частот кадров, таких как фильм с частотой 24, 48 и 60 кадров в секунду или видео с частотой 25, 30, 50 или 60 кадров в секунду. Конечно, эти более высокие частоты кадров также могут отображаться с их исходной частотой. [16] [17]
В спецификациях электронных камер под частотой кадров понимается максимально возможная частота кадров, которую можно захватить (например, если время экспозиции было установлено близко к нулю), но на практике другие настройки (например, время экспозиции) могут снизить фактическую частоту до меньшее число, чем частота кадров. [18]
Повышение частоты кадров (FRC) — это процесс увеличения временного разрешения видеопоследовательности путем синтеза одного или нескольких промежуточных кадров между двумя последовательными кадрами. Низкая частота кадров приводит к искажениям изображений , резким артефактам движения и ухудшает качество видео. Следовательно, временное разрешение является важным фактором, влияющим на качество видео. Алгоритмы FRC широко используются в приложениях, включая улучшение визуального качества, сжатие видео и создание замедленного видео. [ нужна цитата ]
Большинство методов FRC можно разделить на методы на основе оптического потока или ядра [19] [20] и методы на основе пиксельных галлюцинаций. [21] [22]
Методы на основе потоков линейно комбинируют предсказанные оптические потоки между двумя входными кадрами для аппроксимации потоков от целевого промежуточного кадра к входным кадрам. Они также предлагают реверс потока (проекцию) для более точного искажения изображения . Более того, существуют алгоритмы, которые дают разные веса перекрывающимся векторам потока в зависимости от глубины объекта сцены через слой проекции потока.
Методы, основанные на пиксельных галлюцинациях, используют деформируемую свертку с генератором центрального кадра, заменяя оптические потоки векторами смещения. Существуют алгоритмы, которые также интерполируют средние кадры с помощью деформируемой свертки в области признаков. Однако, поскольку эти методы непосредственно галлюцинируют пиксели в отличие от методов FRC на основе потока, прогнозируемые кадры имеют тенденцию быть размытыми при наличии быстродвижущихся объектов.
{{cite book}}
: CS1 maint: multiple names: authors list (link)( копия Wayback Machine )