Визуализация музыки или визуализация музыки , функция, найденная в электронных визуализаторах музыки и программном обеспечении медиаплеера , генерирует анимированные изображения на основе музыкального произведения. Изображения обычно генерируются и визуализируются в реальном времени и синхронизируются с музыкой по мере ее воспроизведения.
Методы визуализации варьируются от простых (например, моделирование дисплея осциллографа ) до сложных, которые часто включают ряд составных эффектов. Изменения громкости музыки и частотного спектра являются одними из свойств, используемых в качестве входных данных для визуализации.
Эффективная визуализация музыки направлена на достижение высокой степени визуальной корреляции между спектральными характеристиками музыкального трека, такими как частота и амплитуда , и объектами или компонентами визуализируемого и отображаемого визуального образа.
Музыкальная визуализация может быть определена, в отличие от предыдущих существующих предварительно сгенерированных комбинаций музыки и визуализации (например, музыкальных клипов ), ее характеристикой как сгенерированной в реальном времени . Другое возможное отличие некоторые видят в способности некоторых систем музыкальной визуализации (например, Geiss' MilkDrop ) создавать разные визуализации для каждой песни или аудио каждый раз, когда запускается программа, в отличие от других форм музыкальной визуализации (например, музыкальных клипов или лазерного светового дисплея ), которые всегда показывают одну и ту же визуализацию. Музыкальная визуализация может быть достигнута в 2D или 3D системе координат , где можно изменять до шести измерений, причем 4-е, 5-е и 6-е измерения - это цвет, интенсивность и прозрачность.
Первым электронным визуализатором музыки был Atari Video Music , представленный Atari Inc. в 1977 году и разработанный инициатором домашней версии Pong Робертом Брауном. Идея заключалась в создании визуального исследования, которое можно было бы внедрить в Hi-Fi стереосистему. [1] В Соединенном Королевстве пионером визуализации музыки был Фред Джадд .
Музыкальные и аудиоплееры были доступны на ранних домашних компьютерах, например , Sound to Light Generator (1985, Infinite Software) использовал кассетный проигрыватель ZX Spectrum . [2] В фильме 1984 года Electric Dreams он использовался в качестве предварительно сгенерированного эффекта, а не рассчитанного в реальном времени .
Для PC / DOS одной из первых современных программ визуализации музыки была программа с открытым исходным кодом , многоплатформенная Cthugha, выпущенная в 1993 году. В 1990-х годах развивающаяся сцена демо- и трекерной музыки стала пионером в области технологий визуализации музыки в реальном времени на платформе ПК; примерами этого являются Cubic player (1994), Inertia Player (1995) или, в целом, их демо-версии , сгенерированные в реальном времени . [3] [4]
Впоследствии компьютерная визуализация музыки на ПК стала широко распространена в середине-конце 1990-х годов в виде таких приложений, как Winamp (1997), Audion (1999) и SoundJam (2000). К 1999 году в дистрибуции находилось несколько десятков бесплатных нетривиальных визуализаторов музыки. В частности, MilkDrop (2001) и его предшественник "geiss-plugin" (1998) Райана Гейсса, G-Force Энди О'Мира и AVS (2000) Nullsoft стали популярными визуализаторами музыки. AVS является частью Winamp и недавно был открыт исходный код [5] , а G-Force был лицензирован для использования в iTunes [6] и Windows Media Center [ необходима ссылка ] и в настоящее время является флагманским продуктом для стартапа Энди О'Мира, SoundSpectrum. В 2008 году iTunes добавил визуализатор "Magnetosphere", созданный The Barbarian Group [7] .
Были приложения электронной визуализации музыки для улучшения опыта прослушивания музыки для глухих и слабослышащих людей . Ричард Берн, кандидат наук в Бирмингемском городском университете , с 2015 года исследует устройство, которое отображает подробную визуальную обратную связь с электронных инструментов . Эти визуальные эффекты будут предоставлять информацию о специфике того, что играется, например, высоту тона и гармоники звука. Это позволяет глухим музыкантам лучше понимать, какие ноты они играют, что позволяет им создавать музыку по-новому. [8]
Исследователи из Национального университета Сингапура также создали устройство, которое стремится улучшить музыкальные впечатления для глухих людей. Эта технология объединяет музыкальный дисплей и тактильное кресло, которое интегрирует звуковые качества музыки в вибрации и визуальные образы, которые коррелируют с определенными качествами, обнаруженными в музыке. Визуальный дисплей показывает различные формы, которые меняют размер, цвет и яркость в зависимости от музыки. Объединение этого визуального дисплея с тактильным креслом, которое вибрирует вместе с музыкой, направлено на то, чтобы дать более всестороннее восприятие музыки для людей с нарушениями слуха. [9]
Музыкальная визуализация также может использоваться в образовании глухих студентов. Cooper Union в Нью-Йорке использует музыкальную визуализацию для обучения глухих детей звуку. Они разработали интерактивную световую студию в Американской школе жестового языка и английского языка в Нью-Йорке. Она состоит из интерактивного настенного дисплея, который показывает цифровой вывод, созданный звуком и музыкой. Дети могут запускать игру на инструментах своим движением, и они могут наблюдать визуальную обратную связь от этой музыки. Они также могут видеть стену «говорящего цветка», в которой каждый цветок может преобразовывать звук в свет на основе определенных частот звуков. [10]
